弱监督动作定位方法的研究

来源 :辽宁大学 | 被引量 : 1次 | 上传用户:luiyun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
动作定位有着广泛的应用前景,自动驾驶、医疗看护、监控、视频检索等领域的进一步发展都需依靠动作定位技术。但是传统的强监督动作定位方法需要对视频数据进行详尽标注,费时费力,而且容易出错,不利于方法的推广,无法处理网络上大量的只有部分标注信息的视频数据。为使动作定位技术能应用到大型数据集中,对弱监督动作定位方法的研究具有重大现实意义。提出三种弱监督时空动作定位方法,以适应不同的应用场景。首先,提出一种基于模板匹配的弱监督动作定位方法,训练视频中实际的动作位置不再由人工标注得到,而是利用动作模板从众多动作提名中选择一个最优提名作为视频中动作的位置。此方法只需为获得动作模板标注训练集中的少部分视频帧,无需对每一帧都进行标注,大大减少了数据集标注的工作量。然后,为进一步减少数据集标注工作量,提出基于单帧匹配的弱监督动作定位方法和基于稀疏点匹配的弱监督动作定位方法。基于单帧匹配的弱监督动作定位方法对训练视频中的每个动作实例只在一帧上进行矩形框标注,在模型训练阶段,用一种新的匹配准则来筛选动作提名。基于稀疏点匹配的弱监督动作定位方法在训练视频的部分帧上标注一个像素点来大致地指出动作发生的空间位置,利用一种新的匹配准则选择最合适的动作提名作为视频中动作的位置。基于模板匹配的弱监督动作定位方法在UCF-sports数据集上的实验只需为训练集标注2000帧图像,相对于强监督方法,训练集标注的工作量减少了69.7%,与TLSVM方法相比,动作分类的准确率提升了0.3个百分点。当重叠度阈值取0.2时,与CRANE方法相比,动作定位的准确率提升28.21个百分点。基于模板匹配的弱监督动作定位方法在大型数据集UCF101上的实验,需要人工标注20200帧图像,仍然十分费时,而基于单帧匹配的弱监督动作定位方法只需标注13320帧图像,基于稀疏点匹配的弱监督动作定位方法的标注工作量更少。所以后两种方法更适用于大型数据集,但是定位精度相对于基于模板匹配的弱监督动作定位方法稍差。
其他文献
针对当前风能采集器低风速下输出效率较低的问题,文中提出了一种采用半环形钝体结构的新型压电式风能采集器,其由矩形压电悬臂梁与安装在悬臂梁自由端上的半环形截面钝体组成
研究土壤调理剂对水稻产量和土壤性状的影响,结果表明:随着土壤调理剂用量的增加,水稻产量和秸秆量随之增加;高量调理剂和低量调理剂处理比不施调理剂处理水稻的千粒重分别增加4.5
当前,健美操已成为高校体育的主要构成内容之一,其所具备的健身属性与健身价值逐渐得到了高校体育教学的重视,并在实际践行过程中受到了学生群体的广泛认可与接受。而要想提
NiMn基哈斯勒合金是具有成分比为1:1:1或2:1:1的Ni-Mn-Z(Z=In,Sn,Sb,...)型金属间化合物材料,由于具有丰富的光学、磁学和电输运性质,例如磁电阻效应、交换偏置效应、磁热效应
苏北地区高等医学院校的发展与本地区经济与社会的发展密不可分,苏北地区高等医学院校应克服高层次人才匮乏、学科水平薄弱、办学经费严重不足等制约自身发展的问题,坚持扎根
随着互联网和云计算的快速发展,我国已进入大数据时代,全社会财税信息互联互通。税务机关强大的数据分析能力和自动化监管能力给企业的税务管理带来了严峻的考验,企业如果不
小学阶段属于基础教育阶段,对学生的性格培养和价值观形成有着十分重要的意义。小学课程的设置更决定着小学生的素质发展,而小学音乐课是提高学生音乐素养,促进学生全面发展
<正>冬虫夏草是由蝙蝠蛾(Hepialus armoricanus)的幼虫感染虫生真菌(Cordyceps sinensis) 所形成的子座和虫草的复合体。现世界上报道的已有380余种,国内已发现60多种,主要分
会议
改革开放以后,现代贵族教育在中国出现并发展,本文试图通过对中外国贵族教育的比较,揭示中国贵族教育存在的问题以及中国贵族教育与精英教育的关系,进而分析当代中国贵族教育
全身炎症反应综合征(SIRS)是因感染或非感染病因作用于机体而引起的机体失控的自我持续放大和自我破坏的全身性炎症反应,是机体修复和生存而出现过度应激反应的一种临床过程。