基于双目摄像机和虹膜检测的视线跟踪系统

来源 :北京科技大学 | 被引量 : 0次 | 上传用户:sbau_1019
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多媒体人机交互技术是多媒体技术和人机交互技术的结合,其主要内容是信息表示的多样化和如何通过多种输入输出设备与计算机进行交互。它包括基于视线跟踪、语音识别、手势输入等各种新的交互技术。而视线跟踪作为这个领域中新兴的技术,引起了国内外研究者的浓厚兴趣,成为近年来人机交互领域中倍受关注的前沿方向。围绕着视线跟踪这个主题,本文主要探讨了立体视觉测距和人脸检测、跟踪等相关问题。 首先,简要论述了人机交互技术和计算机视觉理论的发展历程,并扼要介绍视线跟踪技术的基本原理和方法,总结其研究现状和进展,同时介绍本文的研究背景和研究内容。 其次,研究了双目CCD立体视觉测距理论。提出了摄像机的数学模型,总结了常用的摄像机标定方法,并对双目CCD系统测距建立数学模型,分析其系统误差。在此基础上,提出了基于BP的双目CCD标定算法,来获取测距系统的数学模型。 再次,研究了人脸特征检测与跟踪技术。首先利用人脸肤色模型,把人脸与背景区分开来,寻找连通区域,利用人脸的几何特征,排除与肤色相近的非人脸区域,得到人脸区域。然后对人脸区域的上半部分进行动态阈值分割,把眼睛区域与肤色区域区分开来,得到人眼区域,二值化提取虹膜,利用Sobel算子提取虹膜边缘,Hough变换提取虹膜圆心,而内眼角的提取则采用SUSAN算子。最后对人脸区域的下半部分,利用唇色模型提取嘴唇区域,运用嘴唇模板进行唇线拟合,得到左右嘴角。完成人脸特征检测之后,对人脸的跟踪做了简单的研究。 最后,研究了视线跟踪算法。借助眼球的数学模型以及双目CCD测距技术,根据虹膜相对眼角和嘴角的移动距离,计算出视线的方向。在此基础上,设计了一个基于双目摄像机的视线跟踪系统原型,该系统由双目CCD测距、人脸检测、人脸跟踪和视线跟踪四大模块组成。实验结果表明,平均的视线偏差角度为8.37°。
其他文献
永磁同步直线电机因其可靠性好、推力强、效率高等优点,在许多特殊的工业领域得到了越来越广泛的应用。迭代学习控制算法因其算法简捷、控制效果显著,特别适用于具有重复运动的对象,成为了智能控制中备受关注的热点之一。论文是以永磁同步直线电机为控制对象来研究迭代学习控制的。此外,还分别将迭代学习控制与滑模变结构控制以及人工神经RBF网络控制相结合来实现电机控制的研究。论文首先在永磁同步直线电机及矢量控制的工作
运动行人检测与跟踪是城市交通环境下的智能车安全行驶辅助导航技术中的一项关键技术,对推动智能车辆技术的发展及保障城市道路交通安全具有重要作用。 本文针对城市交通环
论文《营口港矿石装卸自动控制系统研究》来源于“营口港鲅鱼圈港区一港池深水泊位工程及矿石堆场工程”项目,论文作者在自控系统理论基上,充分利用当前最新发展的自动控制技术
随着科学技术的快速发展,四旋翼飞行器凭借着优越的性能被广泛的应用于军用与民用各个领域中。因此,研究四旋翼飞行器具有重要的实际意义。本文以四旋翼飞行器研制为背景,展开对
转炉冶炼的钢水终点成分及温度主要由供氧进行控制,供氧量的有效确定对于转炉炼钢至关重要。本课题将机理方法与智能控制方法相结合,建立转炉炼钢静态控制模型。为了准确控制
随着我国电信格局的不断演变,固网运营商已处在市场竞争的劣势,对传统PSTN网的改进(固网智能化)已迫在眉睫。固网智能化的一大特点是在PSTN网络中引入了集中用户数据库(SHLR)
随着计算机技术,特别是网络技术的日趋成熟,信息系统的作用显得日渐重要,它已经广泛遍布于工业、农业、商业等诸多领域,计算机信息系统逐步成为整个国家机构运转的命脉和社会
近些年来,超临界机组已经成为我国重点建设的火电机组,是火电厂未来发展的主要方向。在维持电力行业的安全性和稳定性中,它们发挥着极其重要的作用。与此同时,超临界机组的动态建模是控制系统的设计和性能研究的基础。因此,对于大型机组建模与控制的研究是特别迫切的。对于建模来说,其关键在于所建模型是否适用于实时的仿真,并且能够全面的反映系统动态特性。本文以某1000MW超(超)临界机组为研究对象,在机理分析和模
人体视觉分析是近年来计算机视觉领域中备受关注的前沿方向,它在虚拟现实、视觉监控、知觉用户界面(PUl)等领域均有着广阔的应用前景。人体运动分析一般包含运动检测、运动目
直接转矩控制是继矢量控制之后发展起来的一项高性能交流电机控制技术,该控制方法以其结构简单、鲁棒性强、动态性能好的特点得到了广泛应用。无速度传感器技术能够简化调速