2025年9月18日 周四
首页 > 过刊浏览>2015年第23卷第12期 >75-75
PDF HTML阅读 XML下载 导出引用 引用提醒
基于Hadoop的快速并行视频处理方法
作者:
作者单位:

四川大学 电子信息学院四川 成都 四川大学 电子信息学院 四川 成都,

中图分类号:

TP

基金项目:

国家自然科学(61172181)自助


A Fast Parallel Video Processing Method Based on Hadoop
Author:
Affiliation:

College of Electronics and Information Engineering,

  • 摘要
    • | |
  • 访问统计
    • |
  • 参考文献
    • |
  • 相似文献
    • |
  • 引证文献
    • | |
  • 文章评论
    摘要:

    目前,基于 Hadoop视频处理的传统方法都是通过MapReduce从本地文件系统读取数据,利用帧字节流进行MapReduce间数据传输,这会产生大量的系统 IO,造成系统资源浪费。针对此问题,提出一种基于Hadoop平台的视频处理方法,实现Hadoop支持的视频类型扩展,设计了MapReduce 相关视频数据处理接口,使 Hadoop 可以更快速处理视频文件。通过在多台计算机组成的集群实验表明,该方法在运行时间上比传统方法缩短10%,IO读写量减少50%以上,提升了Hadoop视频文件的处理效率。

    Abstract:

    AtSpresent,traditionalSmethodsSbasedSonSHadoopSvideoSprocessingSreadSdataSfromSlocalSfileSsystemSthroughStheSMapReduce.SUsingSbyte-stream,StheyStransferSdataSbetweenSMapReduce,SbutSthisSwillSproduceSaSlargeSamountSofSsystemSIOSandScauseSlossSofSresources.SConsideringStheSissue,SthisSpassageSproposesSaSvideoSprocessingSmethodSbasedSonSHadoopSplatform.STheSmethodSrealizesSvideoStypeSextensionsSSsupportedSbySHadoopSandSdesignsSvideoSdataSprocessingSinterfacesSaboutSMapReduce,SwhichSmakeSHadoopSprocessSvideoSfilesSmuchSfaster.SExperimentsSonScomputerSclusterSillustrateSthatScomparedSwithStraditionalSmethods,thisSmethod’sSrunningStimeSdecreasesSbyS10%SandStheamountSofSIOSreadSandSwriteSdeclineSmoreSthanS50%.SSoSitSimprovesStheSprocessingSefficiencySofSHadoopSvideoSfilesKeywords: Hadoop; Map-Reduce; parallel computing; video processing; IO write amount

    参考文献
    相似文献
    引证文献
引用本文

康 浩,严 华.基于Hadoop的快速并行视频处理方法计算机测量与控制[J].,2015,23(12):75.

复制
相关视频

分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2015-06-25
  • 最后修改日期:2015-08-03
  • 录用日期:2015-08-03
  • 在线发布日期: 2016-01-08
文章二维码

您是本站第 4754718 访问者

通信地址：北京市海淀区阜成路8号院科研档案楼

电话/传真：01068372068 68767886 68370689 68371556 E-mail：ck@chinamca.com

版权所有：计算机测量与控制 ® 2025 版权所有

京公网安备 11010802026262号