基于hadoop技术的图像视频处理的研究与应用

《基于hadoop技术的图像视频处理的研究与应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、学校代码：10385分类号：研究生学号：1300205014密级：公开基于Hadoop技术的图像视频处理的研究与应用ResearchandApplicationofVideoandImageProcessingBasedontheHadoopTechnology作者姓名：蒋春燕指导教师：王佳斌副教授实践导师：黄立勤高级工程师专业学位类别/领域：工程硕士/计算机技术研究方向：光电信息监测与智能计算所在学院：工学院论文提交日期：二零一六年三月三十日摘要随着各类社交网站迅速崛起、移动终端设备和多媒体技术的高速发展，视频、图像等非结构化数据呈现爆炸式增长。视频和

2、图像已成为人们传递信息的重要方式，并且数字图像、网络视频等非结构化数据中潜在的信息也成为国防、军事、工农业、信息学、医学等研究领域的主要信息来源。但是，如何高效的从海量图像、视频数据中挖掘出其潜在的应用价值已经成为当前数据挖掘领域的研究热点。目前H.264和JPEG2000已成为视频和静态图像较为广泛的压缩标准，在分布式云平台上，对数字图像的预处理和视频数据的编解码是发掘这些海量非结构化图像视频数据中潜在知识的前提。本文围绕着“基于Hadoop技术的图像视频处理”这个课题，详细阐述了Hadoop技术的起源、意义和发展现状；比较了云计算与并行计算、网格计算

3、、志愿计算等高性能计算之间的差异；且在Linux集群上搭建了Hadoop平台。本文主要研究如何在Hadoop集群上进行数字图像和视频的处理，设计了Hadoop的图像数据类型，进行了数字图像灰度值、二值化、边缘检测和图像匹配的实验。设计了视频数据接口，进行了SDV格式的网络监控视频进行解码的实验，解决了在Hadoop平台上直接按平台设置的数据块大小分割视频遇到的帧不完整、缺关键帧和少头数据信息的问题。本文还比较了传统单机上图像处理和视频解码与在分布式上进行的优缺点。本论文的研究成果可为在Hadoop平台上进行图像和视频处理的深入研究提供理论依据和实验基础，

4、本文创新点有：1.研究基于Hadoop技术的图像视频处理的算法。Hadoop平台完全开源免费且节点可自由横向扩展而不对原平台增加任何开销，适合大数据时代日益增长的视频、图像等非结构化数据的分布式存储与智能计算。2.在Hadoop平台上对SDV格式的监控视频进行解码实验，设计了适合HDFS存储机制存储的小视频合并算法。与传统单机相比，该方法充分利用了Hadoop分布式计算的优势，即视频数据量越大，解码效率提高得越明显。关键词：Hadoop平台图像数据类型图像处理SDV监控视频解码IAbstractWiththerapidriseofvarioussocia

5、lnetworkingsites,aswellastherapiddevelopmentofmobiledevices,videoimageandotherunstructureddatahaveappearedanexplosivegrowth.Videoandimageshavebecomeanimportantwayforpeopletoexchangeinformation.Moreover,theunderlyinginformationwithindigitalimages,onlinevideoandotherunstructureddat

6、ahasbecomeamajorsourceofinformationforvariousresearchfields,suchasnationaldefense,military,industry,agriculture,information,medicalandsoon.However,howtoefficientlydigoutthepotentialvaluefromthemassofimagesandvideodatahasbecomearesearchfocusinDataMiningsofar.Furthermore,H.264andJP

7、EG2000havebecomeanextensivecompressionstandardofvideoandstillimagestodate.Therefore,preprocessingofdigitalimageandcodinganddecodingofvideodatainthedistributedcloudplatformarethepreconditiontoexplorethepotentialknowledgefromthesevastofunstructuredvideoimagedata.Thispaperfocusesont

8、hetopicof"VideoImageProcessingBasedonthe