基于眼动与手部行为识别的驾驶分心检测算法研究

来源 :济南大学 | 被引量 : 0次 | 上传用户:shaomingfang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着生活水平的提升和汽车行业的飞速发展,如何有效减少交通事故成为社会关注的热点之一,而驾驶员分心是诱发交通事故的主要原因。根据美国道路国家高速公路安全管理局(National Highway Traffic Safety Administration,NHTSA)公布的数据,交通事故死亡人数中,16%为驾驶员分心导致,因此驾驶分心检测技术对保障道路交通安全有着至关重要的作用。基于机器视觉的分心检测具有非侵入、非接触、低成本等优点,但目前仍存在驾驶分心难检测、准确率低且易受环境影响等问题。本文针对认知分心、视觉分心和危险驾驶行为这三种分心状态,提出了相应的检测算法和网络模型。一方面,基于驾驶员眼动行为提出一种注视区域识别方法,并在此基础上通过量化驾驶员注视区域的变化频率,结合阈值规则达到了识别驾驶员认知分心的目的。另一方面,基于手部行为特征提出一种危险驾驶行为识别模型,通过融合两种网络模型,达到危险驾驶行为识别准确率和速度的双重提升。主要工作内容如下:(1)提出了一种多通道卷积神经网络,用于识别驾驶员注视区域。首先,根据驾驶员的视野范围将车内环境分为7个注视区域并作为标签,采集驾驶员的图像作为数据集;然后,利用Dlib库将输入图像切割出左眼、右眼、面部和头部区域图像,并分别在各自的通道进行训练;最后,将四个通道分段融合,先将左眼和右眼特征融合,再与面部和头部特征融合。经过实验对比分析,该方法的识别精度为96.07%。(2)针对驾驶员分心检测,提出了基于视线活跃度的认知分心检测算法和基于时域分析的视觉分心检测算法。首先,在工作内容(1)的基础上统计一段时间内驾驶员注视区域的变化,若视线在车内区域停留时间超过2秒则判定为视觉分心;然后,利用K-means聚类计算出视线集中区域,不同的视线集中区域使用相应的量化公式计算视线活跃度;最后,通过实验分析得出认知分心的阈值范围。实验结果表明,所提算法分心检测准确率达到95%。(3)针对危险驾驶行为识别,提出了一种HAR-Net网络模型。首先,采集五种危险驾驶行为数据集:吃东西、喝水、打电话、看手机和吸烟;然后,以Center Net网络为基础,选择hourglass网络和Res Net-50网络作为骨干网络,并改进其网络结构。其中,hourglass网络采用扩展卷积来构建基本模块,Res Net-50网络修改了下采样卷积模块,并均在残差模块中加入注意力机制;最后,将改进后的两个网络双线性融合作为骨干网络进行训练。通过消融实验和对比实验,该模型在自主采集数据集和CVPR-Hands 3D数据集上m AP分别达到98.8%和88.3%且满足实时性要求。
其他文献
蛋白质是构成人体细胞、组织的重要部分,是生命活动的主要承担者。膜蛋白是与细胞质膜或细胞器膜相结合的蛋白质,其在细胞增殖、分化、信号转导等活动中起着非常重要的作用,因此,针对膜蛋白类型进行精确分类成为一项重要课题。随着高通量生物实验方法积累了大量膜蛋白序列数据,研究人员利用膜蛋白序列信息训练分类模型,通过序列特征可以快速判断未知蛋白质类别。单一特征并不能全面表示蛋白质生物信息,而特征缺失将直接影响模
学位
实现户内配电设施的远程操作需要借助直流电机以及相关辅助触点,通过触点闭合回路控制电机正反转完成相应操作。不同方案的开关设备有各自的联锁逻辑需求,所以依据电力行业标准中提出的“五防联锁”要求正确设计是实现电动操作的重要环节。鉴于此,对五防联锁在10 k V、35 k V开关柜遥控操作中的应用进行了分析和探讨。
期刊
忆阻器的概念自首次被蔡绍棠教授将其作为第四种电路元件提出之后,在非易失存储、逻辑运算以及人工突触等领域都有很大的进展。对比于更早出现的一些存储器和CPU等存算分离的系统来说,忆阻器具备着小尺寸、易制备、低功耗、计算及存储的速度快等优异的性能,此外,忆阻器所具有的先进的存算一体的功能是目前信息社会用来打破存算分离的冯·诺伊曼体系最有力的技术。因此,在新兴的信息时代,发展和探究忆阻器的各种性能刻不容缓
学位
车载自组织网络(Vehicular Ad Hoc Network,VANET)作为智能交通系统中重要组成部分之一,可以支持行人、车辆、基础设施之间实时高效可靠的通信。VANET通过交换与安全类相关的消息告知其他车辆当前的交通状况和危险事故等信息,并为道路安全和交通管理等提供安全可靠的信息传输通信方案。媒体访问控制协议(Media Access Control,MAC)协议主要负责VANET信息传输
学位
涡轴发动机是结构复杂的热机,存在着火风险,若同时直升机上灭火系统丧失功能将导致火情不可控。为分析直升机上发动机不可控火情的发生概率和设计薄弱环节,本文开展了基于模型的安全性分析。通过模型驱动的安全性分析软件simfia进行建模并自动生成故障树,通过概率计算验证其发生概率符合适航规章要求。通过最小割集分析和重要度分析得出设计薄弱环节为发动机燃油进油接口、直升机灭火瓶和灭火管路。
期刊
聚类算法在数据挖掘中占有重要地位,并被广泛应用于医疗行业、金融行业、房地产行业等等,与我们的生活工作关联十分密切。在数据量较小维度较低的场景下,传统聚类算法能够表现出收敛速度快,结果精度高的优势。然而随着科学技术的发展,大数据时代中高维海量数据的出现,导致传统聚类算法计算量大大增加,难以取得较好的聚类效果。随着深度学习的发展,高度非线性转换的方式可以将数据处理成更有利于聚类的表示,于是与传统方法相
学位
时代在进步,技术在革新,我国整体社会形态随着经济的高速发展不断演变,在这种不断演变的背景下,现代企业所处的行业和形态也发生了天翻地覆的变化,国内外竞争日益剧烈。据2020年第七次人口普查数据来看,我国人口年龄结构发生很大变化,老龄化程度加剧,而劳动力供给总量占比下降的结构性变化也早在2012年就已开始。所以对于企业而言,无论经济环境和管理对象都呈现出了新的时代特征,大批量的新生代员工步入社会就业,
学位
为研究装配式移动平台的安全性,以某高速公路标段为背景,研究装配式移动平台体系。通过运用有限元计算软件Midas-Civil,建立移动平台模型,设置边界、荷载条件,分析了在自重、施工活荷载以及风荷载等荷载组合工况下,装配式移动平台的强度、刚度及稳定性,计算结果表明移动平台的安全系数满足规范要求,内力、变形以及整体稳定性均能较好地控制在安全范围内,配套的安全保障措施能使移动平台充分保证安全性,根据装配
期刊
蛋白质间的相互作用(Protein-Protein Interactions,PPIs)参与了生物体内绝大部分生命活动,对蛋白质相互作用的预测研究是生物信息学领域中一个亟待解决的重要问题。高通量实验室技术的日臻成熟积累了大量的PPIs数据,但数据十分嘈杂且覆盖率很低。近几年,随着计算机技术日新月异的发展,计算方法开始在PPIs领域显现出其优势,基于蛋白质序列与机器学习的计算方法逐渐成为蛋白质相互作
学位
随着服务机器人的广泛应用,其缺陷日渐凸显,如果考虑到老年人陪护中的问题,就知道现有陪护机器人还有多少问题亟待解决了。对于老年人来说,表达清楚一件事是有一定难度的,但是通常老年人表达意图时,环境因素和他们的手势、体态表达的信息往往是十分重要的,很多服务型机器人忽略了这一点,机器人不理解人的行为意图成为助老陪护机器人的应用痛点问题。因此,根据老年人特点,本文创建了多模态意图逆向主动融合的机器人交互系统
学位