基于图像处理的眼神捕捉和头部定位的研究

来源 :上海海洋大学 | 被引量 : 0次 | 上传用户:woai6672690
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在林业作业中,集材机广泛用于收集、牵引木材。然而在操作集材机时,操作员在驾驶的同时必须留意各类驾驶室外部的物体、对象以保障自身及他人人身安全,例如其他林业工作者、机械、路径、地貌地形,并且他们还需要操作集材机拟定合适的行进路线以便工作计划的进行。由于注意力长期不集中可能导致工作效率低下,甚至人员伤亡、车辆器械的损毁。确定操作员如何驾驶集材机,他们的视线分布和为什么集中在特定区域来完成相关任务,对于提高集材机的使用效率和安全性是不可或缺的。为了获取集材机操作员的视线,一种基于图像处理的计算机算法以及空间向量的运算被运用到此次研究中。通过视频处理,将采集到的操作员面部图像处理后得到操作员眼部的空间向量。通过估测头部后方图形的空间方位从而逆推操作员的头部运动,随后将眼部和头部的空间向量叠加,生成投影到前挡风玻璃的虚拟视线点。本次研究设计了一个在前部装有固定支架以放置摄像机,而在后部放有供捕捉图形的安全帽。在实验过程中,三个GoPro运动摄像机负责建立视线的3D模型。第一个GoPro相机连接到安全帽前面的支架上,以获得操作员的视线。第二个GoPro相机安装在驾驶室的后方,以便在操作员前视期间捕获头部运动。第三个GoPro相机安装在驾驶室的左前侧,使头部动作在向后观察或者操作抓钩的过程中可以跟踪头部方位。然后用计算机进行图像处理,恢复重构操作员的视线点。通过计算注视行为的密度并生成由虚拟透视的注视热点图,从热点图的色块分布可以得出操作员在林业作业过程中的视线集中区域。为了降低操作事故率和长时间在驾驶室采伐木材引发的疲劳,以及提高多任务执行效率等目标,本次研究还测试了远程遥控驾驶的可行性。由于现有的技术条件以及资金配备,不具有直接进行远程遥控驾驶的软硬件条件,本次研究以一种模拟远程驾驶的方式进行了实验。集材机的驾驶室内设置了基于视频的驱动系统以此测试遥控驾驶的可行性。广角摄像头安装在集材机的前端,根据之前得到的视线点热点图,校正了摄像头的方位。一个显示器安装在方向盘以上的区域,另一台笔记本电脑与相机和显示器相连接,负责快速处理并传输实时视频。实验中,集材机的可视窗口均被遮蔽,操作者仅凭由摄像头传输到显示器上的实时画面进行驾驶操作,完成一段标准的林业作业路径。同时,研究人员也采集了集材机的实时位置以及对应的速度。实验的结果表明,基于实时视频的远程控制是可行的。
其他文献
对我国市场经济活动来说,其核心是企业,而财务管理是企业管理的重中之重,所以企业必须要正确认识财务管理的重要性.在信息技术日益发展的背景下,企业必须要积极推进会计信息
长城是我国现存体量最大、分布最广的文化遗产,是人类历史上宏伟壮丽的建筑奇迹和无与伦比的历史文化景观,是中华民族的精神象征,是中华民族凝聚力和创造力的重要资源.只有深
传统钢筋笼滚焊机焊接效率低、自动化程度不足,针对这些缺点,研究生产异形管钢筋骨架滚焊机,该型滚焊机主要用于自动化、标准化生产制造异型钢筋骨架。钢筋笼滚焊机能否正常
期刊
国家对于海上补给所需要的装备技术进行大力研发支持,使其迅速成为我国军事力量的一种凸显。本文研究的重点是在基于神经网络算法下应用了主动式波浪补偿技术的吊机系统。其
学位
期刊
云模型是在概率论和模糊数学基础上提出的一种从自然语言值表示的定性概念到表征定性概念的定量数据之间的不确定性映射,它根据表征模糊性事物本身特征的客观数据进行建模,具有
本研究以甘蔗糖厂副产品糖蜜为原料,通过谢氏丙酸杆菌和枯草芽孢杆菌共生发酵生产维生素B12和维生素B2、微生态制剂等功能性成分作为饲料添加剂。重点对甘蔗糖蜜的处理方法、
在一个企业当中,企业的武装保安工作会受到企业文化的重要影响,企业文化能够为企业武装保安部门贡献出自己的力量,从而在企业当中构建起比较和谐稳定的工作环境,有效的化解企