基于自监督深度学习的鱼群视频异常检测

来源 :上海海洋大学 | 被引量 : 0次 | 上传用户:lpve530
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
我国水产品来源以养殖为主,水产品需求量的不断提高,水产品养殖规模的不断扩大,对我国水产养殖的自动化和智能化提出了更高的要求。在鱼类养殖过程中,在外部环境的异常如水温异常、溶解氧浓度异常、光照异常、异常化学物质等的刺激下,鱼类会产生不同的异常行为反应,如鱼群的回避行为、鱼群异常游动、鱼群大规模死亡等。鱼群的这些异常行为如果不能被及时地发现并被妥善处理,将造成巨大的经济损失。因此,鱼群异常检测作为水生动物疫病监测预警、风险评估和应急处置的重要环节之一,有着较高的研究价值及实用价值。随着我国深远海网箱养殖、工厂化循环水养殖等现代化的养殖模式得到推广并逐渐普及,传统的人工进行鱼群异常检测受限于监测范围和监测时间,已经满足不了大规模鱼类养殖场景下的鱼群异常检测需求。依托于计算机视觉技术和机器学习技术的快速发展,近年来越来越多的研究者利用鱼群的图像、视频对鱼群进行自动化的鱼群异常检测,但是由于鱼群异常行为种类繁多,形式各异,人工设计的特征通常难以覆盖所有的鱼群异常行为,使得这些鱼群异常检测方法难以全面地对鱼群异常进行有效检测。另外,部分基于分类的鱼群视频异常检测方法同时需要大量的正常鱼群视频数据和异常鱼群视频数据,使实际检测效果受限于异常鱼群视频数据的完备性,对不存在于异常数据中的鱼群异常检测效果不佳。受监控视频异常检测相关研究的启发,本文提出了两种基于自监督深度学习的鱼群视频异常检测方法。针对目前基于预测的视频异常检测方法中对视频的时域信息、全局空间信息利用不足的问题,本文将U-Net和Video Vision Transformer相结合,提出视频异常检测模型Trans Anomaly,以获取视频片段中更丰富的时域信息和全局特征。为了使Video Vision Transformer能够适用于图像生成任务,本文对Video Vision Transformer中的时间、空间Transformer编码器进行改进,并将其用于视频未来帧预测。通过在多个视频异常检测基准数据集上进行实验,证明了本文提出的Transformer编码模块的有效性,通过实验确定了计算异常分数时每个数据集适用的滑动窗口大小及步长。在以红鲫鱼为实验鱼的鱼群视频异常检测数据上,本文提出的Trans Anomaly异常检测模型能对鱼群的动态异常进行有效的检测,异常检测结果的AUC达到0.919,而对鱼群的静态异常如死亡后侧翻的鱼类个体进行异常检测时,基于预测的视频异常检测方法的特性出现了检测失效的情况,异常检测结果的AUC为0.343。针对基于预测的视频异常检测模型对鱼群静态异常检测失效的问题,本文进一步提出了基于特征预测和条件标准化流的视频异常检测模型FP-CFLOW。条件标准化流在工业产品异常检测中有良好的检测效果,而和工业产品异常类似,鱼群静态异常也通常表现为鱼类个体的外观变化,因此,本文尝试使用条件标准化流提高对鱼群静态异常的检测效果,同时,模型通过对图像特征进行预测,以保持模型对鱼群动态异常的检测效果。本文在红鲫鱼鱼群视频异常检测数据集上进行实验,实验结果表明在该数据集上FP-CFLOW通过增加特征预测模块使模型的异常检测效果得到明显提升,相比于第三章提出的Trans Anomaly视频异常检测模型,FPCFLOW对鱼群静态异常检测的AUC由0.343提升至0.967,虽然对动态异常的检测结果AUC为0.848,低于Trans Anomaly,但FP-CFLOW对综合异常的检测效果更好,由0.607提升为0.913。本文研究结果表明,使用自监督深度学习模型可以对鱼群视频异常进行有效检测,并在本文的最后对所提出模型的优势以及存在的不足进行总结,对基于自监督深度学习的鱼群视频异常检测方法的未来发展方向进行展望。
其他文献
海水缺氧会导致多种海洋生物濒临灭绝,进而破坏海洋生态平衡、阻碍全球氮、磷循环、影响人类的生产生活。目前,全球范围内的缺氧海域数量仍在逐年增加。从整体来看,全球海洋海水溶解氧含量的下降速度可能已经超出了自然随机波动的水平。近几十年来,为了更高效全面的了解海水溶解氧现状并及时治理,学者对海水溶解氧的关注度逐渐提高。其中,海水溶解氧的评价和预测成为最近的研究热点,但研究人员获取到的海水溶解氧原始数据为时
学位
近年来,计算机视觉和数字影像分析技术迅猛发展,图像信息、多媒体信息以及其他的众多信息以一种新的信息呈现方式出现在我们的视野中,融合到我们的生活中,在工业、医学、遥感等诸多我们所熟知的领域,都可以看出数字影像技术和计算机视觉技术的广泛应用。因此,越来越多的人开始意识到数字图像处理技术的重要性,他们把图像作为获取信息的一种新的重要方式,并开始逐渐习惯从纷繁复杂的图像中提取我们所需要的信息。然而,获取高
学位
可持续发展理念下,实施节能降耗控制已经成为炼油化工企业绿色生产的内在要求。在阐释炼油企业节能降耗控制必要性的基础上,分析炼油企业节能降耗生产中的问题,并指出节能降耗技术在炼油化工企业生产中的应用要点。期望能进一步减少炼油企业生产中的能源消耗,提升企业生产效益,促进炼油化工企业的持续、稳定发展。
期刊
国土空间规划工作的开展需基于现有资源具体破坏情况开展管理工作。而随着经济社会建设步伐不断加快,对于我国土地空间规划的科学性与有效性提出更高要求。在分析国土空间规划与生态环境保护内涵、阐述生态环境与国土空间规划关联性基础上,围绕生态修复规划、生态红线协调性、生态环境用途管制、生态空间分类与分级、生态环境保护分层管制维度,提出国土空间规划下生态环境保护策略,从而有效提升我国国土空间规划对于生态环境保护
期刊
船舶自动识别系统(Automatic Identification System,AIS)每间隔几秒钟向卫星或陆基接收器传输船舶身份、位置、航速和航向等空间信息。渔船AIS轨迹信息蕴含着渔船自身特有的属性、状态和空间行为特征,在一定程度上反映渔船捕捞作业行为与所处环境中各种要素直接的交互关系。近年被国内外学者用于挖掘渔场时空高精度捕捞强度信息,了解渔场捕捞压力和渔船捕捞空间行为,为时空高精度渔业资
学位
<正>在学校老师和其他家长眼里,多动症儿童就像是班里的一把"达摩克利斯之剑",随时都可能会产生难以预料的后果。面对多动症儿童,家长不知道怎么教,老师管不了,特殊学校收不了,多动症儿童教育到底路在何方?专家称,多动症儿童的教育是一个复杂的问题,仅靠一方根本无法
期刊
大部分基于卷积神经网络的低照度图像增强方法需要相互配对的数据进行训练,在现实世界中获取大量同一场景下的低照度图像和正常光图像是非常耗时的。低照度场景下拍摄得到的图像存在着低对比度、颜色失真和大量噪声等问题,图像增强任务需要在保留图像细节的同时,进行正确的颜色恢复,提升图像视觉质量。图像增强算法可以为目标检测、目标跟踪、语义分割等计算机高级视觉任务提供更为有力的支持和帮助。行人检测在计算机视觉领域中
学位
随着深度学习在视觉领域的普遍应用,近年基于视觉的神经网络优化一直是研究的重点。但很多的基于深度学习的视觉算法,均是在特定的公开数据集上训练,在实际的应用中,由于其应用环境的限定,公开数据集训练的网络不一定能满足场景中要求的实时性、节能性和准确性,网络需要进一步的优化。基于此,本文以鱼类的检测和识别作为应用场景,搜集、清洗并标注了“捕捞鱼类识别数据集”和“水族馆鱼类目标检测数据集”,探究深度学习网络
学位
保护物种多样性是全人类共同的课题,而植物资源是物种多样性的重要组成部分,然而由于人们在进行人类活动的时候,缺乏对植物资源的正确认识,而导致目前已经有许多植物面临着灭绝的风险,因此为了明确这些珍稀濒危植物的物种信息,比如形态特征、生存条件、濒危系数、保护措施等,需要选择用一种有效且便捷直观的方式对珍稀濒危植物知识进行组织和管理。互联网上充斥着大量的珍稀濒危植物信息,然而这些信息高度分散、真假难辨、版
学位
畜牧业是农牧产业的重要组成部分,对于保障农副产品稳定,巩固民生发展具有重要意义。现如今,畜牧业养殖方式正在逐渐退出小规模、非统筹方式的饲养模式,向集约化、规模化养殖模式转变。产业模式转变过程中,养殖企业无疑不希望通过信贷融资等途径获得资金支持,谋求更高水平的发展变化,但银行等金融机构对于畜牧行业信用贷款、投保抵押等行为要求严苛。养殖行业贷款难是因为畜牧养殖风险较大,不稳定因素较多,牲畜状态不可控,
学位