基于机器视觉的奶牛身体区域检测与典型行为分类方法

来源 :西北农林科技大学 | 被引量 : 0次 | 上传用户:helly986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着畜牧业生产消费需求的增加,全球畜牧业需在有限的环境资源下饲养更多的动物。精准畜牧业可望在实现低成本高效率生产方面发挥着重要作用。在奶牛精准养殖中,面临着基于机器视觉技术对复杂环境下奶牛局部关节区域检测研究匮乏、奶牛区域检测模型鲁棒性和适应性差以及奶牛视频行为识别模型不完善等问题。针对上述问题,本文采用图像处理技术、计算机视觉技术以及深度学习方法,以实现自动高效精准的奶牛监测为目标,对奶牛腕关节区域检测、身体区域检测、犊牛与场景的交互行为识别,以及基于时空特征的奶牛行为视频识别分类等关键技术开展研究。论文主要研究内容及结论如下:(1)研究并提出了一种融合彩色边缘和双边投影的奶牛腕关节区域检测方法。针对目前奶牛腕关节区域检测研究较少,以及复杂的牛场环境、泥巴、排泄物等带来的检测困难的问题,提出了一种融合彩色边缘和双边投影的区域检测方法,首先对获取的彩色图像进行彩色边缘提取以获取牛腿边缘信息;经过开运算、垂直投影和凸壳处理,去除大部分背景并获得彩色牛腿区域;再进行蓝色分量阈值处理和水平投影,以确定目标区域中心和区域范围,从而检测出腕关节区域。对81个样本试验结果表明,与基于Kmeans和基于显著性的检测方法相比,该方法平均重叠率分别提高了6.48%和17.26%,且对背景障碍物或地面反光有良好的鲁棒性,可以有效地检测出奶牛腕关节区域,为进一步检测奶牛腕关节肿大及磨损伤疤奠定了基础。(2)研究并提出了一种基于YOLOv4-SAM的奶牛区域检测模型。为了实现复杂场景下长期对奶牛区域自动高效精准检测,提出了一种YOLOv4-SAM的深度学习网络,该网络将空间注意机制SAM与YOLOv4有机融合,YOLOv4提取多尺度特征,而SAM可突出奶牛生物特征相关的关键特征,以提高生物视觉特征的表征能力。用成年奶牛和犊牛在复杂环境下(如白天和夜间)的视频样本对提出的方法进行测试,结果表明,基于YOLOv4-SAM方法的准确率为92.29%,召回率为96.51%,m AP@0.5为93.13%,其总体性能优于Faster R-CNN、Retina Net和YOLOv4。此外,依据头部与腿部相对高度差,可定量分析奶牛跛行行为,验证了奶牛区域高精准检测的应用潜力。(3)研究并提出了一种基于视频分析技术的犊牛与场景交互行为识别方法。为了实现对犊牛行为的监测以及改善早期农场管理,提出了一种基于视频分析技术的行为识别方法。该方法结合背景减去法和帧间差分法实现目标区域的检测和目标边界或轮廓的获取,并进一步提取目标区域的运动特征,以及与场景中固定区域(如休息区,饲料桶等)的相对位置信息,以实现犊牛与场景的交互行为识别。试验结果表明,犊牛进或出休息区、静止状态和转身行为的识别成功率分别为94.38%、92.86%、96.85%和93.51%。采食和饮水行为的识别成功率分别为79.69%和81.73%。该方法可用于进一步获取犊牛的休息时间、采食时间以及饮水时间等信息,为犊牛管理提供重要的参考数据。(4)研究并提出了一种基于Bi GRU-attention的奶牛典型行为识别分类模型。针对目前奶牛行为识别模型中样本单一以及背景存在大量干扰信息的问题,提出了一种Bi GRU-attention的行为分类模型。该模型将Inception-V3作为图像序列视觉特征提取层,使用双向门控循环单元(Bi GRU)进一步提取时空特征,用注意机制(Attention)模块增强与行为相关的时空特征并实现行为的分类。在犊牛和成年奶牛两组不同的数据集上进行测试,分类准确率分别达到了82.35%和82.26%,优于LSTM、Bi LSTM和Bi GRU模型分类准确率。表明本文提出的Bi GRU-attention方法能够捕获关键的时空特征,提高了行为分类能力,可为精准畜牧业动物行为监测提供技术支持。(5)研究并提出了一种基于C3D-Conv LSTM的奶牛典型行为识别分类模型。针对基于时空特征的奶牛行为识别模型中时空特征提取不够充分问题,提出了一种C3DConv LSTM的深度学习模型。该模型有机融合了C3D网络和Conv LSTM模型,C3D网络从视频帧中提取视觉特征和时间信息,而Conv LSTM进一步提取时空特征,并将最终得到的特征馈送到softmax层进行行为分类。在犊牛和成年奶牛数据集上进行试验,该模型的分类准确率分别为90.32%和86.67%,优于Inception-V3、Simple RNN、LSTM、Bi LSTM和C3D等模型。结果表明,本文提出的C3D-Conv LSTM可提取更加丰富的时空特征,大大提高了行为分类精度,为精准畜牧业中动物行为自动分类奠定了基础。
其他文献
城市群是指一定区域内由不同等级规模的城市,依托交通和信息等网络,组合而成的相互制约、相互依存的城市统一体。作为城市群结构的基本形式之一,城市群空间结构是城市群发展程度、发展阶段与演化进程的空间反映。城市群的发展通常伴随着其空间结构的变化,使得城市群空间结构理论成为城市研究的基本理论和研究热点。准确、客观并定量地分析城市群空间结构,将有助于合理调整城市群未来发展布局,最大限度发挥城市群的高效率成长效
首次公开发行(IPO)是企业融资的基本方式,影响着资源的有效配置。由于新股价值的评估具有高度不确定性,询价制度设计的目的便在于有效地促使询价机构进行信息生产,提高定价效率。其基本假设是,询价机构是充分理性的。然而,大量的证据表明,个体是有限理性的。在不确定的条件下,个体的行为偏差会有所显现。基于此,以市场化改革期间深圳证券交易所账户级询价数据为基础,探究在新股询价样本内,询价机构是否会展现出行为偏
无线网络日益增长的能源消耗已成为下一代移动通信系统亟需解决的关键问题之一。针对此问题,最近兴起的低成本、低能耗、可编程、易部署的可重构智能表面(reconfigurable intelligent surface,RIS)有望成为一种有效的解决方案。RIS是一种具有可编程电磁特性的人工超表面,通常由大量精心设计的电磁单元排布组成。通过给电磁单元的可调元件施加控制信号,RIS可以动态地调控电磁场的幅
学位
研究背景:肿瘤恶病质是一种多因素代谢紊乱综合征,可导致机体多种代谢通路异常。本研究的目的是通过多组学技术寻找肿瘤恶病质中改变最明显的代谢通路;进一步针对所观察到的脂质代谢异常尤其是胆汁酸BA的代谢异常进行深入研究,靶向考察BA代谢在肿瘤恶病质发生发展过程中的变化,以及肝脏和肠道菌群在BA代谢异常调控中的参与,并初步探讨用靶向BA代谢的药物如TUDCA治疗肿瘤恶病质的可行性。研究方法:采用小鼠结肠癌
尖晶石LiMn2O4由于具有高的热稳定性、廉价和环境友好等一系列突出的优点,被认为是锂离子电池中最有前景的正极材料之一。但LiMn2O4正极材料也存在诸如容量衰减快、高温下锰的溶解和较差的倍率性能等明显缺点,极大地限制了其大规模商业化应用。近三十年以来,研究者们通过不同的过渡金属元素掺杂来优化LiMn2O4正极材料的电化学性能,取得了良好的效果,但不同种类和价态的过渡金属掺杂提高LiMn2O4各项
突触是神经元之间交流的主要部位,正确的突触形成是神经环路正常工作的基础。突触结构和功能异常是诸多神经精神性疾病的病理生理机制之一。青春期突触修剪对神经发育和突触可塑性具有重要意义。异常的突触修剪可能导致各种大脑疾病,如精神分裂症、自闭症和焦虑症等。多巴胺D2受体Drd2与多种神经精神疾病有关,是临床上常用的抗精神病药物的靶点。在本课题研究中,我们通过对SR-Drd2+/-大鼠不同类型的树突棘进行时
网络空间安全是推动“互联网+”信息技术发展的重要安全保障。随着量子通信技术的不断进步,基于传统公钥密码算法的网络安全解决方案面临量子计算机带来的巨大冲击和安全挑战。而目前大多数公钥加密方案(如RSA加密,El Gamal加密等)的安全性均是基于传统数论假设,这些方案在足够大和稳定的量子计算机面前显得不堪一击。因此,急需探索能抵抗量子计算机攻击的密码方案的设计。鉴于基于编码的密码体制具有较高的安全性
有机荧光探针作为荧光方法的主流工具之一,因操作简便、灵敏度高、生物低毒性、可修饰性强等多种固有优势而被广泛开发并应用于分子示踪、手术导航、生物检测等生物分析领域。相较于传统的“常开”型荧光探针,由某种离子、分子或者生理参数触发而开启可视化信号的激活型荧光分子在成像效果上体现出明显的低背景、高信息量的可观优势。另外,近红外成像窗口因其生物自体荧光弱、组织伤害小等特点而成为荧光探针发射范围调控的主要目
循环肿瘤细胞(CTC)是从肿瘤原发灶或者转移灶中脱离进入到血液循环系统中并在外周血中游离的肿瘤细胞。近几年的研究表明,CTC中不同基因表达情况对肿瘤转移和复发具有重要的意义,然而目前的研究仅局限在对单个癌症类型的基因表达中。不同肿瘤类型的CTC有其独有的特征,同时也具有共性。因此,在泛癌层面分析并识别肿瘤特异性特征和共同特征可能对肿瘤的诊断和检测具有重要意义。另外,目前高通量测序技术为人们研究CT