论文部分内容阅读
基于双目立体视频的远程智能监控系统是将双目立体视频、网络传输、目标检测、智能跟踪等技术应用于视频监控系统中,将多种技术有机结合起来,充分发挥各自的优势和特点,实现它们的优势互补和最大化。它具有较大的经济意义和学术价值。本文详细讨论了此项技术,并开发了相关的系统。
本文构建的基于双目立体视频的远程智能监控系统在逻辑上由视频服务端、视频客户端、控制服务端和控制客户端等四个部分组成,并通过四个主要处理过程实现,也是本文的所做的主要工作:1、实现了立体视频的实时捕捉并对立体视频数据进行实时压缩。本文采用两个工控摄像头和两块视频捕捉卡进行立体视频数据采集,采用基于H.264标准的编码器对捕捉的视频数据进行编码。2、完成了视频数据的网络传输与立体显示。本文采用UDP和RTP相结合的传输协议进行视频传输,客户端从网络接收视频数据并解码后,再把两路视频数据分别写入到显示卡的缓存中,然后由显示卡驱动不断交换前后台缓存,完成立体视频图像的显示。3、实现了运动目标区域检测与人脸定位。本文采用一种基于自适应背景图像估计与当前多帧图像的混合差的算法来实现快速精确地检测和提取运动目标区域,并充分利用视频图像的时域连续特性和人脸肤色信息,实现快速可靠的人脸定位。4、实现了智能跟踪与远程控制。本文根据模糊控制规则将运动目标区域检测与人脸定位的结果翻译为控制信号,控制云台及摄像头,使得被监视对象始终处于监视画面的中央区域,达到智能控制的效果;另外,用户也可以通过手动或语音操作向云台和摄像头发送远程指令控制其动作。其中后两项也是本文研究的重点。
实验表明该系统较好地完成了设计目标,在视频服务器端完成了视频的采集与同步,通过网络传输在视频客户端实现了立体再现,并在控制服务器端实现了智能跟踪,同时在控制客户端通过多种方式实现了对云台及摄像头远程控制。