基于自相似矩阵及其关联技术的相似视频检测研究

来源 :中国科学院研究生院 中国科学院大学 | 被引量 : 0次 | 上传用户:beryl1830
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着Internet的普及与多媒体技术的迅猛发展,人们面临着爆炸式增长的视频信息。在这些海量视频之中存在着的大量相似视频,一方面造成了多媒体数据库的冗余,要求更加巨大的存储空间,另一方面也增加了视频检索的难度,降低了用户的体验质量。因此,相似视频检测(Near-Duplicate Video Detection,NDVD)成为当前国内外的研究热点之一。   相似视频指在视频内容上相似程度很高但却并不完全相同的两段或多段视频。相似视频的成因有多种,它们既可以是因为拍摄时不同的视角、光照条件造成的,也可以是由后天经过某些转换模式(Transformation,如插入文字、加入噪声、画中画)人工编辑产生的。由于相似视频的内容信息存在着上述的不确定差异,相似视频检测问题向传统的视频检索问题提出了更高的要求。本文通过对视频的自相似性分析,给出了一系列相似视频检测解决方案,其主要工作包括:   1.提出了一种基于自相似矩阵的视频特征提取与表达方法。与传统的基于关键帧抽取、通过比对关键帧来匹配相似视频的模式不同,本文的工作以视频的整体信息为着眼点,既注重局部特征的抽取,又立足于视频全局,将这些特征以自相似矩阵的形式有机组织起来。实验证明,本文提出的“局部(特征提取)--全局(特征表达)”更加适合相似视频检测问题。由于最终反馈给系统的是视频内容的自相似性,因此该方法并不局限于帧匹配的正误,对视觉层面发生了较大变化的相似视频仍然鲁棒。   2.提出了一种自相似矩阵的描述子,实现了自相似矩阵的有效距离度量。由于相似视频通常长短不一,因此其分别产生出的自相似矩阵也具有不同的大小。同时,注意到自相似矩阵本身的特性(半定对称阵,主对角线全0),本文提出了一种自相似矩阵描述子,通过挖掘矩阵主对角线附近区域的模式信息进行两个不同大小的自相似矩阵距离度量,藉此实现相似视频的精确匹配。实验证明,与传统的自相似矩阵描述子对比,我们的VCS描述子更加鲁棒,相似视频检测质量更高。   3.讨论了相似视频转换模式识别问题,并提出了一种基于多特征的相似视频转换模式识别方法。转换模式是相似视频的成因,我们将相似视频比作病人,则转换模式相当于病症。看病时讲究对症下药,而实验也证明不同转换模式下的相似视频特点不一,可以通过转换模式的先验知识选择更加有效的“药物”(特征)进行处理。本文首先提出了转换模式识别问题,希望通过对转换模式识别的研究进一步提高相似视频检测质量。   4.提出了一种基于转换模式识别的相似视频检测方法。借助上述转换模式识别的结果,我们选择对该种转换模式更加有效的特征。实验表明,转换模式识别和特征选择模块的加入有效提升了传统的单一特征条件下的相似视频检测质量。同时,相似视频的转换模式作为其自身重要属性也为媒体追踪、视频分类、归档等问题提供了必要信息。
其他文献
随着Internet的飞速发展,Web己经发展成为包含多种信息资源、站点分布全球的海量信息服务网络。搜索引擎正是一种帮助用户从信息海洋中找到用户所需要信息的工具。一些通用的
图像编辑是指将图像中的内容呈现进行改变,以更好的满足应用需求。这是当前国际上的一个热点研究内容。目前,这些方面的研究工作很多,但它们大都是在像素层面上进行处理,不便于对
工作流技术作为一个概念最初是出现在图像处理和文档管理领域中,它是业务过程在计算机系统中的表示。随着计算机网络、数据库和分布式对象等相关技术的迅速发展和成熟,工作流
大气光学参数实时测量及管理系统主要完成近地面激光大气传输有关的参数测量,并将测量到的参数发送到上层控制计算机,及对所测量到的数据进行管理。   针对上述情况,论文
学位
软件可靠性是度量软件质量的关键性因素,是软件使用者最为关心的问题之一。准确预测软件可靠性,有利于指导软件测试最大限度地发现软件故障,阻止失效发生,节约开发成本,提高软件质
中国互联网络信息中心(CNNIC)2010年1月发布的第25次中国互联网络发展状况统计报告指出,在3.84亿网民中,约3.21亿网民使用网络音乐应用,网络音乐以83.5%的使用率高居互联网应
文本聚类是聚类方法与自然语言处理相结合在文本处理中的应用,是聚类分析领域的一个重要研究分支。随着近年来互联网新闻文本信息的急剧增多,文本聚类的方法得到了很广泛的应
图形信息处理是包装印前领域的重要组成部分。在包装印前处理的很多方面,都需要图形轮廓算法的支持。因此二维图形轮廓算法在包装印前处理领域占有重要的地位。在包装印前领
当前的电子行业竞争激烈,大部分企业为提高生产效率都进行了企业信息化建设。虽然企业越来越重视信息化建设,但还是存在信息化技术单一、各系统集成度不高、现有软件不够灵活
过程神经元网络(PNN)是人工神经元网络的一种泛化模型。一个能有效训练PNN网络结构和权函数的学习算法是发挥PNN强大逼近能力的关键。PNN的现有学习算法主要基于“正交基函数展
学位