基于OSVOS的单目标和多目标视频前景提取算法研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:ronalito
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
OSVOS算法是一种常用的视频单目标前景提取算法。该算法简化了深度学习样本标签数量,在视频单目标分割上取得了较好的分割效果,但其在目标提取过程需要提供真实掩码标签,真实掩码标签的获取效率低,因此该算法不能直接应用于实时性要求较高的系统。此外,在光照变化、遮挡、相似目标干扰等复杂场景下,OSVOS算法存在目标分割不完整、轮廓定位不精准等问题。本文以OSVOS算法为基础,结合交互式目标选择算法实现单目标前景的实时提取;然后,在视频前景分割网络中加入并行的轮廓提取分支网络,实现单目标前景的精确提取;最后,通过结合实例语义信息和目标重识别实现多目标前景实时、精确提取。本文主要研究工作包括:1、基于OSVOS的单目标视频前景提取。首先,针对OSVOS算法在进行视频目标分割中需要额外提供真实掩模标签的问题,设计了一种简单交互式视频目标提取算法(Inter-OSVOS算法)。将交互式分割结果作为标签输入到分割网络,在保留OSVOS算法性能的情况下实现视频特定目标的快速提取。其次,针对Inter-OSVOS算法目标定位不足的问题,提出改进的Inter-BS-OSVOS算法。在分割网络中增加互补的轮廓分支网络,训练该分支网络提取目标轮廓,通过进行超像素对齐和轮廓恢复,实现前景目标的精确定位。最后,利用CDNet2014数据集和DAVIS2016数据集进行训练和测试。结果表明,Inter-OSVOS算法与OSVOS算法在提取单目标在精确度方面几乎无差异,且适用于实时获取。Inter-BS-OSVOS算法对复杂场景视频有更好的鲁棒性,相比OSVOS算法和Inter-OSVOS算法,其在提取目标的轮廓精确度上有了明显的提高。2、基于OSVOS的多目标视频前景提取。针对Inter-BS-OSVOS算法在进行多目标前景提取时提取目标不完整和精确度低等问题,提出OSVOS-ReID算法。在Inter-BS-OSVOS算法的基础上,引入实例语义分割,将像素精确到每一个实例上,再加入重识别模块检索丢失和新增的目标,实现特定场景视频的多目标精确提取。然后,利用CDNet2014数据集和DAVIS2017数据集进行训练和测试。实验结果表明,OSVOS-ReID算法对复杂场景的鲁棒性、提取目标的精确性以及提取目标边缘精准度上相比同类算法有明显提高。
其他文献
近年来,咪唑类衍生物受到越来越多的关注,而金属配合物在光、电、磁等方面都有很好的应用。由于苯并咪唑有良好的生物活性,也经常被应用于工业、农业、医学等领域。本论文是
电压互感器(PT)的开口三角电压回路对电力系统中的保护的正常运行起着重要作用,开口三角电压回路接线错误将会引起保护装置的误动作或拒绝动作。本文分析了电压互感器(PT)在直接接
气味对于人的生理情感具有重要的调节作用。现代人80%以上的时间是在室内环境中度过的,因此营造一种舒适的室内气味环境对于人们的工作生活具有重要意义。数字嗅觉是近几年提
虽然集成电路的设计工艺早已经发展至45nm以下,但主流的光刻制造波长仍停留在193nm,两者的差距会使光刻图形产生形变,影响芯片的性能。即使已经提出各种分辨率增强技术来提高光刻精度。但版图中仍存在许多难以制造的热点设计,因此在芯片生产前对热点进行检测就变得十分重要。本文围绕着热点检测展开了以下研究工作:1、针对基于机器学习的热点检测算法需手动提取特征的问题,本文提出了一种基于迁移学习的热点检测方法
新课程改革将以“学生主体”为核心进行改革,这就要求课堂教学采取更多学生的自主学习为主要方式,素质教育的实施,培养具有学习能力的人,有创新能力的人为教育的最终目标。课
随着印尼经济的发展,全球的不断变化,印尼越来越重视语言教育,尤其是汉语教学。学习汉语的重要性已经开始进入印度尼西亚人民的思想中了。中国产品也已经世界化了,服装、家庭
回顾大陆半个世纪城市化的历程 ,提出进入新世纪城市化发展要以生态建设为重点 ,发展生态经济 ,改善生活环境。文章推荐吴良镛先生主编的《人居环境科学导论》 ,提出解决城市生态环境应遵循的原则。
作者认为 ,扩大北京市城市建设资金来源 ,发行城市建设债券势在必行 ,并对市政债券的用途 ,发行债券可能带来的问题及需要解决的问题进行了分析。
随着社会经济的发展和科学技术水平的进步,低电压低功耗的 CMOS运算放大器在实现电子通讯、微生物、笔记本电脑和医学等领域 的小型化和便携式方面发挥了重要作用,同时对改善
信息中心网络(Information-Centric Networking,ICN)作为一种未来网络体系架构,采用了基于内容名字的路由与多播传输机制,同时将缓存作为一个普适的功能部署至每个网络节点。