基于层次结构的视频摘要

被引量 : 0次 | 上传用户:hhlovels
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体信息技术的发展,各种技术产物应运而生,其中比较引人注目的就是各种各样数字视频的出现。但是如何在这视频的海洋中找到符合我们要求的视频,并且能够满足一定的时效性和准确性仍然是个难题。视频摘要由此而生,它的出现无疑为这些问题提供了一条很好的解决途径。视频摘要,就是对视频结构以及视频内容进行自动或者半自动分析,结合分析结果提炼出视频中重要的部分,对它们进行某种方式的排列和整合最终形成能够较全面表达所分析视频内容的概要形式。视频的类型可以是新闻视频、访谈节目视频、娱乐节目视频、电视剧、电影等多种形式,而生成的视频摘要的形式也是多种多样的,有静态视频摘要(关键帧集合),动态缩略视频(含有声音、音乐、图像等的短小视频),也有形式各异的视频海报等。本文主要研究静态视频摘要,在研究过程中,通过对不同类型的视频(例如普通视频,新闻视频,访谈节目等),从底层特征、视频中的内容到交互力度及变化强度这些角度分析并生成涵盖内容丰富且能表达一定语义的静态视频摘要。研究的关键技术是适合视频摘要的视频特征提取。针对普通视频的视频摘要,从视频的底层特征出发,在HSV空间进行有效的镜头的分割,并对镜头进行有效的分类并合成,并采用动态滑动窗口方法来去除冗余帧,生成能够很好表达原视频内容的视频摘要,不仅冗余少,而且无需人工干预。对于新闻节目视频,主要是从视频内容角度出发,包括主持人检测、标题字幕检测,主持人衣服颜色的匹配,并借助其本身特有的从图像帧,到镜头,到故事单元,最后构成整个新闻视频的层次结构,以镜头为单位进行分析,减少了对所有图像帧进行分析的复杂度,能够较完整的划分每个故事单元。最后生成的新闻视频摘要能较好的表达新闻视频的内容。对于访谈节目的视频,通过研究主颜色的时序特点,提出了访谈节目中的交互力度这一语义。而对镜头内的相似性分析时,利用动态区域内互信息的变化提出了在一段时间内变化强度的概念,结合交互力度和动态区域内的互信息,生成的视频摘要能够表达交互力度和一段时间内变化强度这两种语义。为了能够自适应的抽取镜头内的抽样帧,采用的抽取策略是镜头内全局变化相似性最小原则,生成的视频摘要能够达到较为令人满意的结果。本文在最后对视频摘要技术的研究进行了分析和总结,针对存在的问题及相关技术可能的改进进行了说明。
其他文献
目的通过检测多囊卵巢综合征(PCOS)外周血miRNAs的表达量,探讨其在PCOS患者中的表达情况及临床意义。方法选取2015年12月-2016年12月在东莞市石排医院妇科收治的PCOS确诊患者
海藻酸钠与不同钙盐在不同溶剂中制备海藻酸钙微胶囊,并对腐霉利原药进行包埋。用扫描电子显微镜测定微胶囊粒径大小及其分布;高效液相色谱测定微胶囊中腐霉利的释放速度。结果
“ ”和“(弓弓)”在甲骨文中主要用来表示对主观意愿的否定,修饰的动词多是占卜主体能够控制的动作行为。但是,出现的时期不同,而且在具体用法上也有一些区别。
期刊
班固的《汉书·艺文志》是一部对中国学术产生了深远影响的重要的书目分类著作和史学著作,后人凡欲考见群经授受源流和古籍存佚真伪均须仰赖此书,然而《汉书·艺文志》又不是
目的:探讨麒麟丸联合左卡尼汀对少弱精子症的疗效。方法:将120例男性少弱精子症患者随机分为3组,A组为联合用药治疗组,B组为左卡尼汀治疗组,C组为麒麟丸治疗组,治疗前、后2个
研究背景:肥胖患者在临床较为常见,而单纯性肥胖指不伴有显著的神经、内分泌、形态及功能变化,但可伴有代谢调节过程障碍;因其它疾病所发生造成肥胖称为继发性肥胖病。肥胖作为
当前,我国大气污染十分严重,特别是在京津冀和东北局部地区,受化学工业废气的影响,空气污染,已经严重影响到了人们的日常生活。所以需要加大对大气环境污染物监测的力度。本
近年来,为了挖掘本地特色产业的内在潜能,加大开发力度,发展特色经济,增加群众收入,浪卡子县政府紧扣国家产业政策,充分利用本地资源优势,把特色乳制品加工业作为拉动区域经济跨越式
文章对电动助力转向系统的工作原理、优越性及其应用现状进行了简要说明,对比乘用车对商用车的结构和工况特点进行了分析,并从关键零部件选型、助力特性设计等方面对电动助力
根据世界旅游组织的出版物《2020年旅游业远景:全球预测与市场解剖》推算,到2020年,国际游客中3%将是出于乡村旅游动机而旅游的,乡村旅游以其景观优美、生态自然、资源丰富、富