手势交互和沉浸式虚拟现实技术在创作系统中的应用

来源 :佛山科学技术学院 | 被引量 : 0次 | 上传用户:spiderkiss
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术、计算机技术和虚拟现实技术的日益发展,越来越多的人机交互方式涌现出来。而虚拟手势交互技术就是其中一个重要革新方向,被广泛应用于航空航天、工业应用等各个领域,艺术创作是其中应用探索的一种新领域。如何将虚拟交互技术与计算机计算相交融进行虚拟创作系统平台的开发目前在多领域应用都取得一定成果,但却缺乏有效的具有指导意义的设计流程方法的理论形成。沙画是一种最近流行的艺术创作,传统的沙画艺术创作受到场地、光线、材料、工具等因素的制约,导致识别度低,创作实现过程繁琐等问题,以及不具备良好的传播和存储功能的缺陷,手势交互和沉浸式虚拟现实技术为传统沙画艺术提供了一种新的体验和创作展现方式。本文以虚拟沙画创作系统为载体,基于Leap Motion系统的手势交互与Unity虚拟现实技术进行融合,从系统的操作者作为研究对象出发,以系统操作者为中心的原则进行设计,提出了手势交互创作系统的的设计框架和设计方法,搭建设计出虚拟沙画创作系统,通过试验对手势的识别和有效性进行测试论证,试验表明能够满足虚拟沙画中的实时性和有效性的要求,并满足了艺术创作的传播性和存储功能,这一案例为其他手势交互与虚拟现实技术融合的创作系统提供了思路与实现的可能性。本文的主要研究工作包括:(1)对手势交互系统进行特性分析,分析系统设备特点、交互特性和信息特征;(2)提出虚拟手势设计原则和系统设计框架;(3)对基于Leap motiom手势识别的方法及算法进行分析;(4)对手势交互进行案例设计,研究实现流程与方式;(5)以虚拟沙画为例构建场景模型,进行手势姿态和控制设计,进行沙画细节处理设计的研究,并完成系统设计,并进行校验。本文的研究目标是将沉浸式虚拟现实技术和手势交互技术相结合,提出手势交互创作系统的流程和方法,使艺术创作方式和虚拟现实技术相融合,优化艺术创作的过程和实现创作方式的多元化。本文研究所取得的创新成果:(1)研究出虚拟创作系统平台开发的可行性有效的设计流程;(2)定义出了虚拟沙画创作技术的手势语意;(3)在Unity软件中对虚拟沙画虚拟仿真系统平台进行了开发,并进行了功能组件的设计和脚本代码的编写和封装;(4)完成了沙画效果细节处理的算法优化设计,实现了“积累”和“坍塌”功能相应程序;(5)给虚拟沙画创作系统设计了色彩设置模块,满足增加沙画创作的多元化,增加用户体验感,使沙画创作过程更加逼真和富有乐趣。
其他文献
近年来,乳腺癌已成为危害女性健康的罪魁祸首之一。早期治疗仍旧是挽救乳腺癌患者生命的基础。随着人工智能的发展,利用机器学习来建立乳腺癌智能诊断系统已成为医学领域的研究热点。乳腺癌诊断有三个方面的难点:一是样本数据不平衡,即正常样本大大多于患病样本,造成少量的正确诊断却对应虚高的准确率,因此需要采用强泛化的网络,本论文采用AdaBoost算法来解决这一问题;二是医学指标众多,在众多指标中找出与乳腺癌有
惯性导航技术有着其它导航技术无法比拟的优势,但是它的发展受到了惯性传感器的影响,传统的惯性传感器(陀螺仪和加速度计)虽然精度比较高,但是其体积大、价格昂贵、可靠性等缺点使得惯性导航技术只有在高端场合得到应用。随着MEMS惯性传感器的发展,使得惯性导航技术在中低端场合得到了推广。而MEMS-IMU作为惯性导航的基本平台成为了学术界研究热点。本文的研究背景是研制一款实用的国产化MEMS-IMU。因此本
目前大部分课堂情况记录方法仍然停留在使用传统的人工签到和记录的方式,该过程繁琐且效率低下。随着深度学习、大数据等技术的深入研究与应用,为教育信息化发展提供了重要动力。利用摄像头对学生课堂情况进行分析的考勤、抬头率检测等系统应运而生。但利用信息技术处理该类问题,目前依然存在如下挑战:高清摄像头在多人密集环境下所采集的人脸分辨率不高且人脸面积微小;已有的人脸识别算法针对微小人脸进行检测的准确率不高;学
近年来,随着我国经济的快速发展,许多的中小企业涌现出来,随着企业单位人数的增长,考勤已经成为公司人事管理的一个重要组成部分,目前市面上采用都是基于生物特征的考勤系统,其中,基于人脸识别的考勤系统因其采集速度快、可靠性高以及耗费成本低的优特点被广泛使用。人脸检测作为人脸识别中的第一步同时也是最关键的一步,本文针对Ada Boost算法需要遍历整张图片造成了检测效率低的问题,提出了一种基于肤色分割的A
随着工业智能化技术的发展,三维数字化技术的应用变得越来越广泛,这也使得三维模型数据呈海量增长。因此,想要有效地管理三维模型库和利用已有模型来加速新产品的设计开发,就需要高效的三维模型分类与检索系统作为支撑。而三维模型分类与检索系统的研究重点以及难点是三维模型的特征提取方法,目前采用的主要方法可以分为:基于视图的方法和基于模型的方法。前者从三维模型的投影视图来提取特征,但在视图采集过程中不可避免地会
无人机行业快速发展的同时,也给人们的安全和隐私带来挑战,迫切需要对无人机进行监管,而无人机检测是实施监管的关键。基于传统方法检测无人机具有成本高、实现复杂等不适合大规模推广的特点。因此,本文重点研究基于深度学习实现无人机的高效检测。针对无人机检测数据集缺失的问题,构造了无人机检测数据集。首先,从无人机运动视频获得高质量的无人机图像;其次,对每一张图像都进行位置和类别标注,其中,位置采用无人机的包围
随着工业4.0的发展,工业机器人的使用变得日益广泛,在自动化生产线上,得益于其人工操作无法超越的生产效率以及产品质量,工业机器人在机械制造、医疗、化工等领域的使用越发出众,为进入智能制造的时代迈出重要一步。在自动化喷涂加工行业,工业机器人技术的应用也变得日益剧增。使用喷涂机器人代替人工喷涂,除了可以提高喷涂效率、质量,还能避免人工喷涂时,油漆对工人健康的损害。本课题以佛山某公司的木门自动喷涂项目为
随着电子产业的发展,PCB(Printed Circuit Board)正不断朝着高密度、高精度、高性能、微孔化、薄形化、柔性化的方向发展,因此也给PCB的缺陷检测技术带来困难和挑战。当前基于机器视觉的PCB缺陷检测方法主要是从图像中获取特征信息,通过对特征进行处理与理解来完成缺陷检测。因非接触性和自动化的优点,机器视觉技术既保障工业生产安全,又提高了缺陷检测的速度和精度。但由于机器视觉方法本身的
在我国教育信息化快速发展的背景下,信息技术与数学学科教学的融合成为数学教育改革的关注焦点。因而,在TPACK视角下研究数学教学问题迎合未来数学教育的信息化发展趋势,具有重要的现实意义。再者,数学认知能力在一定程度上对数学学习的效果起着决定性作用,故如何培养学生的数学认知能力一直是数学教育心理学领域关注的一个热点。但是,在现存的关于认知能力的研究里,结合教育信息化背景研究学生数学认知能力的相对较少。
在智慧工厂的柔性生产线中,智能机器人需要承担搬运作业的任务。这要求机器人拥有更强的感知能力和灵活的行动能力。因此带有感知系统的复合机器人应运而生。与传统的固定式机器人相比,复合机器人最大的区别在于对变化场景的感知。目前的机器人对场景感知能力依然较弱,面对场景的变化,机器人可能失效,甚至引发生产事故。因此感知性和避障性是复合机器人所必备的性能。为此本文以非结构场景下复合机器人避障为任务背景,实现复合