鲁棒的镜头边界检测与基于运动信息的视频摘要生成

《鲁棒的镜头边界检测与基于运动信息的视频摘要生成》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、第22卷第6期计算机辅助设计与图形学学报Vol

2、22NO．62010年6月JournalofComputer—AidedDesign＆ComputerGraphicsJune2O10鲁棒的镜头边界检测与基于运动信息的视频摘要生成张剑(浙江大学理学院数学系杭州310027)(zhangsdust@yahoo．corn．cn)摘要：根据基于内容的视频索引与检索等应用的需求，提出一种视频摘要生成方法．首先进行鲁棒的镜头边界检测，基于颜色直方图计算相邻帧间距离来进行初步检测，并通过分析帧间运动向量去除由相机运动引起的误检测；然后根据镜头的运动指示

3、图将镜头分为静态镜头、包含对象运动的镜头和包含显著相机运动的镜头；最后提出镜头间基于多实例表示的距离度量方法以及聚类算法的初始化方法，采用核K均值算法对每类镜头进行聚类，抽取每类中最靠近类簇中心的镜头作为关键镜头，将关键镜头按时间序组合起来形成视频摘要．与已有方法相比，文中方法能进行更鲁棒的镜头边界检测，识别镜头中的运动信息，并对镜头分类后进行分别处理，从而增强视频摘要的信息概括能力．关键词：运动向量方向直方图；分块运动向量方向直方图；核K均值中图法分类号：TP391RobustShotBoundaryDetectionandVideoS

4、ummarizationBasedonMotionInformationZhangJian(DepartmentofMathematics，CollegeofScience，Z^ejiangUniversity，Hangzhou310027)Abstract：Anove1approachisproposedforvideosummarization．First，robustshotboundarydetectionisconductedbyevaluatingtheinter—framedistancebasedonimagecolorh

5、istogramandbyremovingthefalsepositivebasedoncameramotionanalysis；then，eachshotisclassifiedasstationaryshot，shotwithobjectmotionandshotwithcameramotionbyanalyzingitsmotionindicatormap；wefinallyadaptwellinitializedkernelK——meansclusteringwithaproposedmulti——instancedistance

6、metrictOeachclassofshots．ThevideosummarizationiSconstructedbyextractingtheshotnearesttoclustercenterineachclusterandbyintegratingthemaccordingtotheiroccurringtimeinstanceintheoriginalvideo．Comparedwiththestate—of—artalgorithms，ourproposedapproachcandetectshotboundarieswit

7、hhigheraccuracy，classifytheshotsaccordingtomotioninformation，andbuildmoreinformativevideosummarizationbyabstractingeachclassofshotsrespectively．Keywords：motionvectordirectionalhistogram；blockwisedirectionalhistogramofmotionvectors；kernelK—means在基于内容的视频索引、视频检索和视频浏览帧来表示视频并支

8、持视频快速导航。；另一种是对等应用中，常常需要提取原始视频中有代表性的部视频做结构化分析，按照镜头、场景对视频做切分并分对视频进行表示，这种视频分析技术叫做视频摘消除冗余，并选择原始视频中有代表性的片段重新要．从最后生成的内容来看，当前视频摘要技术主要组成内容摘要”．包括2种模式：一种是直接从原始视频中抽取关键Yahiaoui等Ⅲ基于底层特征对视频帧进行分类，收稿日期：20090710；修回日期：20091009．张剑(1978一)，男，博士，助理研究员，主要研究方向为模式分析、视频处理计算机辅助设计与图形学学报第22卷并用枚举的方式构造

9、视频摘要．Ciocca等]通过视停地计算连续帧问的运动特征．而基于结构化视频频帧的颜色直方图、小波统计特征和边缘方向直方分析的方法则需要对视频中的镜头边界做准确检图来选择关键帧组成视频摘要．L