基于弱监督学习的时序动作定位

来源 :中国科学院大学(中国科学院深圳先进技术研究院) | 被引量 : 0次 | 上传用户:loopdd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社交媒体逐渐成为社会主流,网络建设不断完善,以及视频处理设备日益更新,视频数据量达到亿万级别,并以爆炸式速率持续增长。人工处理速度和精度已然达不到要求,对于庞大的视频数据量,需要利用计算机视觉算法高效、精确的处理。时序动作定位可以应用于视频监控、智能安防、自动提取体育视频、智能字幕讲解等场景,应用领域十分广泛。因此,时序动作定位已成为一项重要的任务。时序动作定位的任务要求是检测出未裁剪视频的动作开始时间、动作结束时间及动作的类别。尽管现在基于全监督学习的时序动作定位已经取得了较好的结果,但是需要视频帧级别的标签,极大增加了劳动力和时间成本。相对的,基于弱监督学习的时序动作定位只需要视频级别的标签就可以训练出较好的模型,并且,视频级别的标签不需要大量的人工标注,更容易获取,因此同时受到了学术界及工业界的重视。本文针对弱监督时序动作定位的精确度不高和缺乏视频帧级标签监督的问题,提出了基于动态阈值与对注意力和时序类动作图同时进行伪监督的时序动作定位方法。在基于动态阈值的弱监督时序动作定位方法中,动态阈值可以动态控制注意力机制中趋于二值化片段的数量,针对不同的视频选取适应该视频的片段数。实验结果证明了动态阈值方法优于最新方法。对注意力值和时序类动作图同时进行伪监督的方法使没有受标签监督的注意力值和时序类动作图受到了伪真值的监督,利用伪监督对模型进行多轮迭代优化,得到最佳模型。实验结果超过大部分最新方法,表明了对注意力和时序类动作图同时进行伪监督可以有效提升模型质量。
其他文献
作为海洋探测和开发的重要工具,水下无人航行器(Underwater Unmanned Vehicle, UUV)是未来智能化作战体系中不可或缺的力量。以云边端协同的分布式框架为基础,针对UUV设计实现了6种数字模型。利用航路管理模型、航位推算模型、节点控制模型以及水动力学模型模拟实现UUV巡航,加入噪声生成模型和目标被动探测应用模型实现对噪声目标检测的数字化仿真。依托数字模型进行数字化仿真或半实物
期刊
线粒体动态变化,即线粒体裂变和融合之间不断循环转换,是线粒体正常运作所必需的。线粒体动态变化对细胞命运具有重要的调控作用,随着生物学研究的不断深入,人们发现LncRNA在很多生物学过程中发挥重要调控作用,但是LncRNA调控线粒体动态变化的分子机制却尚未完全阐明。本研究发现了线粒体定位的LncRNA HITT通过调控线粒体动态变化影响细胞凋亡的重要作用。现有研究中,对于线粒体动态变化的调控研究大多
学位
迄今为止,全球癌症的发病率仍呈迅速上升的趋势,平均每8分钟就有一人确诊癌症,且其中95%以上的恶性癌症为实体瘤。现有的治疗手段无论是经典的手术、放疗或化疗,还是新兴的小分子靶向药、基因疗法或免疫疗法,在对恶性实体瘤的治疗中仍有不尽人意之处。细菌与生俱来的肿瘤靶向、实体瘤渗透及侵袭能力使得细菌疗法成为了最有潜力的肿瘤治疗手段之一,同时合成生物学的兴起也为人工抗瘤菌的改造优化提供了有力工具。肿瘤细菌疗
学位
<正>党的二十大报告指出:“全面依法治国是国家治理的一场深刻革命。”法治是国家治理现代化的一项重要标准。在实现中国式现代化进程中,必须进一步发挥法治引领和保障作用,尤其在重点领域、新兴领域、涉外领域等方面,积极实现制度创新,以满足改革开放和经济社会发展的需要。进入新时代,在推进法治中国建设、法治黑龙江建设过程中,需要政府职能进一步转变、行政效率进一步提高,严格规范公正文明执法,全面优化营商环境。
期刊
报纸
<正>党的十八大以来,我们加快推进国家治理体系和治理能力现代化,取得明显成效。十八届三中全会提出全面深化改革的总目标,就是完善和发展中国特色社会主义制度、推进国家治理体系和治理能力现代化。十九届四中全会审议通过的《中共中央关于坚持和完善中国特色社会主义制度、推进国家治理体系和治理能力现代化若干重大问题的决定》提出,坚持和完善中国特色社会主义制度、推进国家治理体系和治理能力现代化的总体目标是,
期刊
推进全过程人民民主与依法行政的协同发展是深入贯彻中国特色社会主义民主政治发展的重要行政改革实践。全过程人民民主融入依法行政的过程中产生了职能协同意蕴、主体协同意蕴以及政治协同意蕴,因此其建设方向要以人民为中心的民主理念指引依法行政的价值导向、平等对话的民主精神形塑依法行政的行为方式、全过程参与的民主程序保障依法行政的实践成效。本文建议未来可以从政务服务效能、政府回应技术、政务公开透明等方面,进一步
期刊
<正>"学学半。"何意?意即"教是学的一半",文句源自《尚书·兑命》。"兑"即"悦",所昭大意于别类文献可见,如《礼记·学记》道,"虽有嘉肴,弗食,不知其旨也;虽有至道,弗学,不知其善也。是故学然后知不足,教然后知困。知不足,然后能自反也;知困,然后能自强也。故曰:教学相长也。"前苏联"合作教育学"和罗杰斯"非指导性教学"之义,言说师生关系的"相对"而"相成"的转变,道理与其相似。看来民族经典文化
期刊
学位
<正>思政课是落实立德树人根本任务的关键课程。2022年11月4日,距党的二十大胜利闭幕不到一个月的时间,教育部就印发了《关于进一步加强新时代中小学思政课建设的意见》,明确指出——加强新时代中小学思政课建设,要以习近平新时代中国特色社会主义思想为指导,深入贯彻落实习近平总书记在学校思想政治理论课教师座谈会上的重要讲话精神和关于思政课建设的重要指示批示精神,加强党对中小学思政课建设的全面领导,全面贯
期刊