Group09基于内容的视频索引与检索最终ppt课件.ppt

《Group09基于内容的视频索引与检索最终ppt课件.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、组长：晁祥东20111120097组员：吴逸尘20111120080贾井泉20111120040沈董擎20111120056陈娴静20111120138专业：数字媒体技术教师：李震雄基于内容的视频索引与检索提要简介和问题描述12应用举例34总结5提问解决方案的原理和技术简介和问题描述简介和问题描述随着多媒体技术和网络技术的飞速发展，视频在多个领域得到广泛地应用。对这些海量的而且包含大量非结构化信息的数据进行组织、表达、管理、查询和检索成为迫切的需求。因此基于内容的视频检索(Content-BasedVideoRetrieval，CBVR)成为近年

2、来研究的热点。简介和问题描述视频数据特点1.较高的信息分辨率2.关系复杂，数据组织非结构化3.多样性及模糊性解决方案的原理和技术视频索引与检索的方法1.基于元数据的方法2.基于文本的方法3.基于音频的方法4.基于内容的方法5.综合的方法解决方案的原理和技术基于镜头的视频索引与检索视频结构化图解决方案的原理和技术基于镜头的视频索引和检索过程关键技术镜头分段特征分析关键帧提取视频结构分析提问基于镜头的视频索引和检索关键技术有哪些？镜头检测和分段姓名：陈娴静专业：数字媒体技术教师：李震雄镜头检测和分段视频是一种时间媒体数据，他不容易被管理，在视频数据由

3、粗到细的顺序划分为四个层次：视频场景镜头帧而镜头是视频数据的基本单元镜头检测和分段一般来说，在视频情节内容发生变化时，会出现镜头切换，即从一个镜头切换到另一组镜头内容。因此，通过视频检索实现对视频镜头的切分，就是将原始连续视频分成长短不一的镜头单元。镜头切分的好坏会直接影响下一步视频检索结果的准确性。镜头检测和分段在镜头切换时，切换点前、后两帧通常在内容上变化很大，镜头的分段就需要一个合适的镜头切分阈值来判断是否出现了镜头切换，是否需要镜头切分。（阈值是否合适，没有一种客观的方法，通常都需要依靠主观判断，人为的选取合适的阈值）镜头切换镜头的切换有

4、两种：突变和渐变突变（AbruptTransitionAT）：是指前一个镜头的尾帧被下一个镜头的首帧快速代替，是两个镜头之间最简单的切换渐变（GradualTransitionGT）：从视频编辑的角度看，渐变主要是通过色彩编辑和空间编辑得到，是指前一个镜头的尾帧缓慢的被下一个镜头的首帧代替，其中包括淡入淡出，隐现等。镜头内的运动在体育节目的转播，新闻，银行监控视频当中，几乎没有镜头的切换，对于这些视频，人们关心的主要是镜头内物体的运动镜头内的运动常见的几种对象运动归纳如下：出现，消失，进入，退出，运动，停止通过对以上对象运动的分析，可实现对监控视

5、频的基于内容的检索突变镜头检测帧间差值：利用颜色空间HSV，色调Hue，饱和度Saturation和亮度值Value颜色直方图计算相邻两帧之间的差值突变镜头检测边界检测一般地，一个镜头内部的各帧之间的差异不会太大，相邻帧间的差值相对稳定在某一个范围之内，即围绕某个均值上下波动。而当发生镜头转换时，相邻帧之间差值的这种稳定性将被打破，产生较大的帧间差值。可以利用镜头内的这种稳定性进行突变镜头的边界检测。突变镜头边界检测算法在进行镜头切换检测时，只考虑当前帧之前有限长度内的帧间差值信息。这个长度通常是前一镜头结束后的第1帧至当前帧的前1帧，可以认为这

6、是一个可变长度的滑动窗口。突变镜头边界检测算法计算这一窗口内的帧间差值的平均值，可以认为这一平均值近似的反映了整个镜头的帧间差值的平均值，且随着窗口长度的增加，这种近似的程度越来越高。如果当前计算得到的帧间差值与这一平均差值之间差异达到一定程度（也可以说是某一阈值），就认为当前帧是下一个镜头的起始帧。突变镜头边界检测算法设窗口内相邻帧间差值的平均值为Mean当前帧间差值为DF可变窗口长度为winmulti为一预先设定的比例系数(它体现了当前帧间差值和窗口内帧间差值的平均值之间相差的程度)突变镜头边界检测算法(1)如满足DF≥multi×Mean，

7、则认为当前帧为下一镜头的起始帧，设置窗口的起点，并且设顶Mean=0，win=1；(2)否则，win=win+1，重新计算窗口内的帧问差值平均值；(3)继续处理下一帧视频图像。基于聚类的关键帧提取方法姓名：吴逸尘专业：数字媒体技术教师：李震雄基于聚类的关键帧提取方法常见的关键帧提取方法·基于颜色特征按顺序排列帧序列，对相邻帧使用颜色直方图进行分析·基于运动分析对摄影机运动分为焦距变化和角度变化，比较重叠范围·基于聚类基于聚类的关键帧提取方法·基于聚类的方法聚类：将物理或抽象对象的集合分成由类似的对象组成的多个类的过程方法：（1）选取聚类质心，设定

8、阈值（2）对非聚类质心的帧与当前存在的聚类质心进行相似度鉴定，鉴定标准为阈值（3）相似度高于阈值的加入聚类（4）若相似度低于所有已存在聚