头眼双通道智能人机交互系统

来源 :哈尔滨理工大学 | 被引量 : 0次 | 上传用户:shauto29
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今,更加智能化、自然化的多通道人机交互技术(MHCI)正在成为人机交互技术发展的方向。视觉交互以其直观性等优势在MHCI中占据重要地位,而眼动追踪技术作为视觉交互的技术支撑,成为了近年来的热门研究方向之一。眼动追踪技术发展到现在,仍然存在头动受限、精度与实时性难以兼得等问题,导致该技术实用性不佳。头部姿态作为MHCI中另一项关键技术,其指向性模糊的交互特点,使其应用场景受限。但通过头眼行为可以获取人们最直观的交互意图,如果能够将头动和眼动作为双通道输入,发挥两者各自优势,则可以大大提高人机交互的自然性,同时也给残疾人士的人机交互问题提供了一种很好的解决方案。因此本文基于眼动追踪技术和头部姿态检测技术,设计了一种头眼双通道智能人机交互系统。在系统硬件架构上,本文采用头戴式装置来承载整个系统硬件电路,基于CMOS图像传感器和MEMS运动传感器,以现场可编程门阵列(FPGA)为核心来增加系统设计的灵活性,同时利用其并行处理的优势对算法进行加速,从而提升系统的实时性。在系统算法设计上,针对近眼相机下人眼图像的特点,提出了一种由粗及精的眼动追踪算法,通过感兴趣区域获取瞳孔区域图像,运用阈值分割、形态学处理及质心法来逐步定位瞳孔中心;同时针对运动传感器中陀螺仪和加速度计输出数据的特点,采用互补滤波算法,实现头部姿态的解算。在FPGA内部,采用层次化思想划分功能模块,并使用Verilog进行逻辑描述,通过内外电路协同工作实现人眼图像的采集和眼动追踪算法的处理、头部姿态数据的采集和解算以及与上位机之间的数据传输。系统测试结果表明,本系统瞳孔中心定位和头部姿态检测的平均准确率均达95%以上,可对人眼图像及头部姿态数据实时进行处理,同时通过结合上位机驱动软件,可实现头部与眼睛双通道协同进行人机交互。
其他文献
随着时代发展,语文教学越来越重视培养学生的表达交流能力与批判质疑精神。阅读是吸收,写作是倾吐,议论文又是最能体现学生思维发展水平的文体,因此议论文的读写结合教学能够很好地促进学生综合能力的发展,培养时代所需的人才。本文基于跨媒介视域,着眼于议论文文体,提出了议论文读写结合教学原则,依据原则对议论文读写结合教学中出现的问题进行探析,尝试提出可实施的教学策略,致力于促进初中议论文读写结合教学实践的开展
议论文教学一直是初中语文教学的重难点,但受“以考定教”思想的影响,其教学时间被严重压缩,教学现状不容乐观。UbD模式作为先进的教学设计理论,倡导评价前置的逆向设计和单元学习整合,可有效促进深度学习。本研究以UbD模式为理论指导,以统编版初中议论文教学为研究对象,尝试将理论与实践相结合,从而实现UbD模式在语文学科的应用,为议论文教学提供有效的教学设计方案,以期提升议论文教学实效。第一章对UbD模式
作为2022年北京冬奥会、冬残奥会的重要交通基础设施,京张高速铁路保障了赛事的顺利举办,在智能化服务方面充分彰显了中国文化科技。在对京张高速铁路智能化冬奥科技保障总体需求进行分析的基础上,首先提出京张高速铁路智能化服务研究框架,探索建立了旅客智能出行、高速铁路运营安全、服务人文冬奥等方面的研究目标和分阶段实施方法;其次构建了京张高速铁路多模态智能票务、站车一体化协同旅客服务等一系列智能化服务创新;
近年来,人-机器人协同装配作为新一代的生产模式被引入到智能制造系统当中,能够有效解决智能制造的人机协同装配问题,已成为学术界和工业界一个重要的研究课题。为了更好地理解人-机器人协同装配技术以及该技术在智能制造中的发展与应用,运用内容分析法和文献计量法,结合CiteSpace软件绘制知识图谱,对人-机器人协同装配进行了国内外研究现状分析。介绍了人-机器人协同装配研究中的关键技术,包括机器人抓取、人机
孔子是我国古代伟大的教育家,其所创立的儒家学派,成为古代中国主流文化之一。他的教育思想和实践活动,对后世产生了深远的影响。孔子的家庭教育思想主要体现在《论语》当中,发掘《论语》中的家庭教育智慧,对当代家庭教育的开展有极大的借鉴意义。
改革开放以来,随着市场化、工业化和城市化的发展,城乡二元结构差距拉大。在后发展的少数民族农村地区,或面临着“现代性”危机,主要表征为熟人社会结构解体、农村公共文化消解、农村空心化加剧以及家本位影响下的集体行动力缺失。研究发现,解决民族地区农村现代性问题需要从社区为本的方式出发,以“村庄活力再造”为抓手,重塑农村社会结构,创新本土文化互动的形式,鼓励人才回流,重塑农村共同体。可通过培育农村集体行动的
目的 探索糖类抗原199(CA199)在健康体检人群中的分布情况。方法 以35 074例体检人员为分析对象,其中男性19 073人,女性16 001人。分别按性别和年龄对参检人员进行分组(0~20,>20~30,>30~40,>40~50,>50~60,>60~70,>70~80和>80岁组,共8组),通过化学发光免疫法检测CA199,并对不同性别和年龄组的CA199相关数据进行分析。结果 参检人
土地储备规划的编制和实施,是促进土地资源高质量利用、提高政府空间治理能力的重要手段。本文基于上海市土地储备规划实践,围绕规模、布局、资金三大核心问题,通过分析储供潜力、储供保障、空间布局、资金需求等四方面,体现储供联动的编制思路,并提出机制保障建议。
期刊
十月革命后列宁领导俄共(布)就加强党的政治建设进行了积极的实践。一是划清马克思主义与错误思潮的界限,如把党的名称改为俄国共产党(布),划清马克思主义政党与西方社会民主党、社会党的界限;制定和实施新经济政策,划清党的正确的政治路线与孟什维克错误言行的界限。二是同党内错误的政治派别作斗争,使党的事业前进在正确的政治路线上。如革命刚胜利时同以加米涅夫为首的“妥协派”作斗争,维护和巩固党的执政地位;同托洛
在2013年和2014年上交所和深交所陆续运行了信息披露直通车业务,此项业务强化了交易所一线监管职能,形成“放松管制,加强监管”的制度,其中问询函属于非处罚性监管,但具有一定的强制性。证交所通过问询上市公司和审计师企业公告或者财务报告中存在异常风险的地方,发挥对上市公司信息披露的监督作用,也给审计师带来一定的审计压力,从而提高审计师进行审计业务的质量。而上市公司产业结构上的所有权和经营权的分离,不