基于Kinect手势交互的综采工作面虚拟巡检系统设计与实现

来源 :刘怡梦 | 被引量 : 0次 | 上传用户:a27155908
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着“中国制造2025”等战略持续推进,虚拟现实技术正不断应用到数字矿山领域。综采工作面逐步向自动化、智能化方向深入发展,以满足煤矿安全、高效、绿色开采的需求,智能巡检成为当前研究的一大热点。但目前在基于虚拟现实的矿井系统研究方面,美观性与应用性未进行充分融合;在功能巡检方面,纯人工巡检劳动强度大、巡检效率低,机器人巡检又缺乏应用的普适性;在系统交互方面,离不开输入设备的使用,操作者无法发挥人的最大自由度。本文针对上述问题,对基于Kinect手势交互的综采工作面虚拟巡检系统进行了设计与实现。该系统在完成高仿真度虚拟系统开发的基础上,建立基于手势的系统控制方式,以更为自然的交互方式实现综采工作面的设备巡检功能,达到“人-虚-实”三者在巡检过程中实时交互的目的。本文的主要研究内容和成果如下:(1)提出了手势识别+VR界面的智能巡检设备操作方法。井下工作环境复杂,巡检内容繁多,结合矿山智能化发展的趋势与技术,该方法实现了现场人工巡检与集控中心内远程干预相辅助进行综采工作面巡检工作,具有合理性与适用性。(2)建立了高仿真度综采工作面虚拟场景及UGUI交互界面。基于数字孪生理论建立了物理样机的虚拟镜像及综采工作面虚拟场景。研究了模型纹理与渲染、光照与遮挡剔除、粒子系统与动画等技术,在虚拟场景中模拟了综采工作面视觉效果。对VR场景开发、用户界面UGUI设计方法进行了研究探讨。(3)开发了基于Azure Kinect的综采工作面巡检手势交互方式。对Kinect设备的开发、人体手势骨骼的获取与数据库建立、数据处理与手势识别等关键技术进行了研究。完成了巡检手势集的设计与建立,实现了巡检人员与巡检设备的自然交互。该手势交互方法能够满足现场操作人员和集控中心内远程干预人员的巡检操作需要,在不同光照及复杂背景条件下适用性强。(4)实现了“人-虚-实”三者间的数据通信,完成系统的最终融合。巡检人员通过Kinect传感设备的采集、虚拟系统的数据处理,直接对真实样机进行巡检操作;真实样机又通过布置其上的传感器与信息通道将传感信息传回虚拟系统,对虚拟模型进行实时数据驱动。对串口通信、数据库通信等技术进行了研究,实现了巡检人员、虚拟系统、真实样机的实时交互。本文构建的基于Kinect手势交互的综采工作面虚拟巡检系统为综采工作面的安全巡检智能化与合理化提供参考。
其他文献
近年来,煤炭市场步入市场化改革进程,煤炭产业链各环节和煤矿生产区域利润分布不均衡的问题突出。为适应全国煤炭市场改革的大环境,促进煤炭企业的高质量发展,全面、综合分析大型煤炭企业的财务问题至关重要。而目前煤炭企业普遍存在管理水平较低、重业务轻财务等问题,并且现行的比率分析方法也存在结构单一、指标体系设置缺乏科学性、分析结果矛盾等局限性,不利于企业精准把握各经营环节的主要问题。为此,改进企业财务分析方
学位
喷雾降尘技术在井下粉尘防治方面应用广泛,其中传统喷雾降尘采用内混式空气雾化喷嘴和X旋流型压力喷嘴,所喷出的水雾雾滴粒径大、速度慢,对于大颗粒粉尘具有较好的沉降效果,但对粒径微小的呼吸性粉尘捕集效率不佳。本团队研制的超音速虹吸式空气雾化喷嘴喷出的水雾雾滴粒径小、速度快,对各类粉尘具有较强的捕捉能力,是新型高效的雾化降尘技术,但有关该技术的雾滴场分布研究等仍需深入。本文重点针对超音速虹吸式空气雾化喷嘴
学位
现代社会,经济的迅猛增长带动了国企改革工作的不断拓展和深化,以经济支柱身份而存在的国企,怎样借助于融资方式和融资结构的优化来为自身提供坚实的现金流保障,彰显出了极强的重要性。然而就实际来看,目前我国国企的融资管理水平还处于发展的中期阶段,国企如何充分发挥自身企业优势,在经营发展战略的辅助下,对融资方式和渠道进行开拓和创新,对自身的融资结构进行优化,对融资风险进行防控,对有关成本进行集约,并在自身经
学位
煤尘防治对高效绿色现代化无烟煤矿井建设具有重要意义。喷雾除尘方法被广泛应用于煤尘灾害防治,而无烟煤煤化程度高,疏水性强,除尘效果不理想。水中表面活性剂的添加可以提高水对煤尘的润湿能力,获得较好的降尘效果。表面活性剂在无烟煤表面的吸附特性以及表面活性剂、水和无烟煤大分子间的相互作用机制,对无烟煤润湿用表面活性剂的筛选,发展高效无烟煤抑尘技术至关重要。本文以晋城无烟煤为研究对象,采用分子动力学模拟与实
学位
当今社会,公务员、军队文职、事业单位等编制类工作逐渐成为大学毕业生的理想工作。编制类考试培训课程的需求也越来越大,各类公考培训机构如雨后春笋般兴起,为广大考编群体所喜欢。公考培训机构属于成人培训,课程收费高昂。学员为了能快速提升自己,成功上岸,对公培机构的授课质量以及课程内容有着高标准的要求。因此,拥有优质的师资队伍是公培机构长远发展的重要保障。但是,民营公培机构教师由于工作强度大,出差和授课的时
学位
任何一个教师想要取得一个好的教学效果,都是无法离开教学语言的。教学语言作为师生之间最直接的沟通方式,其语言规范性、艺术性对课堂展示效果产生直接影响。本文以小学第八届全国中小学优秀体育实践课展示视频小学组体育课教学语言运用作为研究对象,进而寻求体育教学语言运用的规律并提出使用建议。本文为研究小学体育教学语言运用的特征,通过阅读文献了解体育实践课教学语言运用研究的现状,通过数理统计法将教师的使用特点进
学位
有机发光材料具有结构易修饰、发光稳定、合成简单以及发光易调节等特点,在过去的几十年中,人们设计出许多性能优良的有机发光材料,并在生物成像、化学/生物传感、有机发光二极管等领域得到广泛应用。但是,大多数有机分子之间存在π-π堆叠,易导致聚集淬灭现象,这极大地限制了有机发光材料的实际应用。而聚集诱导发射是一种分子在聚集状态下发光增强的现象,这主要是因为在聚集状态时分子运动受到限制。基于此,开发具有聚集
学位
语音识别作为目前国内外的热门研究领域,对人工智能时代最为关键的人机交互技术的发展有着十分重要的意义。近五十年,语音识别技术发展十分迅猛,尽管传统的语音识别技术已经趋于成熟,但是仍存在多方面的问题:如模型存在过拟合现象;特征学习效果不佳;在复杂环境下识别效果较差等。本文主要从数据集、模型特征提取能力、鲁棒性等三个方面进行优化和改进,进而提高识别效果。以基于深度神经网络的端到端语音识别模型作为基本框架
学位
岩石力学参数是采矿工程活动的基础参数之一,井下获取岩石力学参数难度大、费用高。点荷载法作为一种间接获取岩石部分参数方法,在现场应用广泛。间接测试方法存在精度和对不同岩性的适应性问题,其中压头角度是重要因素。因此,论文以煤矿常见的煤、泥岩、砂岩及石灰岩为研究对象,采用理论分析、数值模拟、实验室试验相结合的方法,研究不同压头角度点荷载作用下煤岩体破坏特征及点荷载强度与岩石力学参数的关系。建立了基于压头
学位
全球化石燃料的持续使用导致大气中CO2浓度迅速增长,由此造成的气候变化问题成为当今人类社会面临的重大挑战。因此,CO2的资源化利用受到越来越多的关注。利用风能、太阳能等可再生资源产生的电能通过电解水产生大量H2,并将过剩的CO2和H2反应生成甲烷(CO2甲烷化),既能有效减少温室气体CO2排放,又能缓解我国天然气供需矛盾,因此备受国内外研究者关注。CO2甲烷化主反应是一个强放热反应,随着转化率升高
学位