在遥操作机器人的各种传感器中，视觉传感器可以实时获取大量、直观的环境信息，为机器人的远程控制及决策提供可靠的信息保障。双目视觉系统可获得作业场景的三维信息及目标物体的深度与尺寸等数据，是新一代机器人环境感知单元的核心，其研究价值更加凸显。论文结合“智能化机器人系统”项目和国防科工局“XXXX机器人系统”项目的具体需求，对遥操作机器人三维视觉单元的系统实现和环境适应性指标提高等关键技术进行了分析、研究。　　针对OpenCV中角点检测模块常有角点提取失败、提取精度较差等缺陷，采用MATLAB与OpenCV结合的方法对独立组建的双目摄像机实现高精度标定，快速求解出摄像机内外参数，并确定摄像机间的相对位置关系，提高了三维信息恢复的准确性。　　提出改进rank变换的多窗口彩色图像立体匹配算法，对彩色图像进行改进rank变换后，通过加入快速多窗口算法，实现立体匹配。改进算法相对于固定窗口非参数变换匹配算法对视差不连续区域的误匹配率降低了18.5％。克服了传统rank变换得到的rank图像过分依赖变换窗口内像素的灰度统计特性及可靠性低等缺点。　　在已获得摄像机内外参数并完成左右图像立体匹配的基础上，实现了遥操作机器人对作业场景及目标物体三维信息的实时获取。对双目视觉测量系统中各环节的误差来源进行了深入分析，提高了系统测量精度。