基于VR技术的沉浸式听障儿童发音康复训练系统

来源 :吉林大学学报(信息科学版) | 被引量 : 0次 | 上传用户:RIPV2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对传统听障儿童发音康复训练中患者主动训练积极性逐渐减弱的问题,设计了一种基于虚拟现实VR技术的沉浸式听障儿童发音康复训练系统.系统采用Unity3D引擎开发康复场景,并采用虚拟现实头盔作为输出端展示虚拟环境,其能以极高的还原度重现虚拟环境,具有很高的沉浸感.通过面部捕捉技术,训练出标准的发音、口型等,通过高清晰的视觉虚拟现实成像系统及手部动作捕捉系统实现人机交互的方式,触发训练功能,利用虚拟现实技术实现更好地帮助听障儿童进行沉浸式发音康复训练.实验结果表明,系统中的发音训练方式可以有效地提高听障儿童的发音能力,对患者语言能力的康复具有积极作用.
其他文献
为直观准确地消除离焦误差造成的图像模糊现象,提升数字图像处理精度,提出基于立体双目视觉的模糊图像视觉效果优化算法.将模糊图像优化问题变换成模糊核路径关系约束下优化估计问题,在模糊核路径对应基础上,构建立体双目图像模糊核路径对应关系模型.将模型作为收敛条件,获取模糊图像特征间的耦合关系与三维几何信息;使用方向滤波器剔除模糊图像噪声,运用Radon变换处理方向滤波在模糊函数估计中引发的误差,利用卷积操作去除模糊现象,通过梯度范数的变分泛函优化算法实现模糊图像视觉效果优化.实验结果表明,该方法可以很好地优化被噪