随着飞行员操作程序的日益复杂,人为因素正逐渐成为制约航空安全发展的主要因素之一。研究人为因素是提高飞行安全水平的行之有效的手段。飞行员的工作量可视为极其重要的人为因素评价标准。为了分析计算飞行员的工作量,利用图像分析技术从监测视频中提取手部动作信息并判读操作状态,作为计算飞行员的工作量的辅助分析依据。准确实时地检测飞行员动作信息,一方面可以服务于飞机界面优化设计工作,为驾驶舱各种器件的可达简易程度分析等提供参考;另一方面也可以为飞行员操作差错判断提供必要的分析方法,进而可以间接避免由人因失误导致的飞行事故,具有工程应用价值。本论文的研究内容主要包括:1)环境建模。在应用环境中使用两款不同视距的摄像头,包括视距涵盖整个驾驶舱空间的长距摄像头和精细捕捉手部细节的短距摄像头。长距摄像提供标定器件的全局坐标,短距摄像头则获取包括指尖、掌心等细节信息用以检测手部操作状态等细微动作。以长距摄像头坐标系为基准,统一各摄像头的坐标系,并获取驾驶舱空间的全局坐标描述。2)手部行为检测。基于任务需求设计技术流程:图像采集,通道融合,目标前景分割,手部检测,手部跟踪,指尖检测,手势判读,操作识别等。同时在驾驶舱环境下对比了主流的手部跟踪方法的处理效果,为相关研究工作提供借鉴。3)设计手动飞行操作实验,验证飞行员动作检测技术的有效性。对该技术的检测跟踪性能进行系统性指标评估,包括检测精度,跟踪率等;同时搭建实验环境,设置实验场景来验证系统的工程性,并提供Open GL可视化界面复现操作场景,以供用户直观参考。