基于超图模型的视频多语义标注方法研究

来源 :江苏大学 | 被引量 : 0次 | 上传用户:xm10282008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着多媒体视频数据的急剧增长,为了便于对海量的视频数据进行语义级别的检索与浏览,基于语义概念的视频检索技术已成为研究的新热点。而在基于语义概念的视频检索研究中所涉及到的重点和难点是如何跨越视频低层特征和人类高层理解之间的语义鸿沟。目前,广泛地认为视频语义自动标注技术是解决这一难点的有效方法。因此,研究出一种高效准确的视频语义自动标注方法显得至关重要。   本文首先简要地综述了本课题研究的背景和意义,然后详细地分析了视频自动语义标注过程中有关主要工作的国内外研究现状。在此基础上,结合超图理论知识,提出了基于谱超图聚类的关键帧提取方法、视频语义概念时间相关性的时序概率超图表示法和基于时序概率超图模型的视频多语义自动标注方法,主要工作描述如下:   (1)提出了一种基于谱超图聚类的关键帧提取方法。通过引入超图理论,提出了一种新的基于谱超图聚类的关键帧提取算法。该算法视镜头中每帧图像为超图的一个顶点,根据帧图像间的相似度构造超边,然后完成帧超图的构建,最后利用基于谱超图的聚类方法实现镜头关键帧的提取。实验表明,该方法可提高视频关键帧提取的有效性和准确性。   (2)提出了一种视频语义概念时间相关性的时序概率超图表示法。利用视频语义概念时间相关性可以进一步提高视频标注的准确性,本文提出了时序概率超图模型用来表达视频的这一特性。该模型是对超图模型的一种泛化:不仅能够表示多个顶点之间的局部聚合信息、各顶点属于它所对应的时序概率超边的概率,还能够为顶点间的时间序列关系建模。   (3)提出了一种基于时序概率超图模型的视频多语义自动标注方法。首先利用本文所提出的时序概率超图模型,将每个镜头视为一个顶点,根据镜头间的相似度和时序关系构建时序概率超边;然后完成镜头时序概率超图的构建;最后利用基于时序概率超图的镜头多标签半监督分类学习算法完成对未标注视频镜头的多语义概念自动标注。标注中同时有效地解决了已标注视频数据不足和视频的多语义标注问题。实验结果表明了该方法可提高视频镜头语义标注的性能。   (4)采用面向对象和模块化的软件系统设计思想,设计并实现了一个视频语义标注与检索原型系统。该系统实现了视频多语义的自动标注和基于语义概念的视频检索等功能,验证了本文所提出方法的有效性和可用性。
其他文献
Chord在结构化P2P系统中普遍的运用,其原因是由于其具有简单、可扩展性高、小路径长度的网络规模和灵活的节点加入及离开机制的显著特点。P2P网络中的关键问题是如何有效地定
牙齿分割是计算机辅助口腔正畸计划的重要步骤,其主要任务是从患者的牙颌数字模型中对牙齿进行识别、定位与提取。高效而精准的分割方法,能够更好地提取牙齿特征,建立准确的三维
上世纪九十年代末,P2P(Peer-to-Peer,对等)网络技术伴随着著名的MP3共享软件Napster的出现重新登上了历史的舞台,自此许多基于P2P技术的应用应运而生,并以迅雷不及掩耳之势快
随着我国通信行业的竞争日趋激烈,提高网络质量成为各大通信运营商尤为关注的问题,同时,用户关于信号质量的投诉量越来越多,而电信投诉在线处理部门缺乏相应的支撑数据和处理
“物联网”被称为继计算机和互联网之后世界信息产业的第三次革命。作为物联网技术的核心组件,RFID系统起着至关重要的作用。随着RFID技术的不断推广应用,RFID系统的信息安全
随着计算机和网络技术快速发展,计算机系统遭受的入侵和攻击也越来越多。现有的入侵检测系统虽然有较高的检测率,但是其缺少自适应性,自学习性,以及容错性等。而人工免疫系统
随着石油行业的发展,石油在运输过程中使用的重要载体一管道,越来越受到工程人员的重视。出于安全需要,对石油管道所进行的管道检测工作也就越来越被工程人员所重视。这也就
随着各个高校科研技术及成果的不断提高与创新,科研水平的高低已经成为了衡量一所高校综合实力的重要标志,现有的科研考核工作多数还在采用人工的管理办法,不仅效率低而且易
无线mesh网是一种在Internet与无线终端之间建立连接的重要技术。随着应用范围的日趋广泛,其用户也越来越多,同时用户对该类型网络的服务质量也有了越来越高的要求。为了解决保
在当今交通情况日趋复杂,管理难度越来越大的环境下,随着计算机技术和图像处理技术的快速发展,利用实时视频图像来对复杂的交通状况进行管理已经成为了智能交通系统(ITS)的重