面向特定韵律的多模式中国手语合成

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:sunxunjun2008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
中国手语是一种多模式协同的视觉语言,通过手势、头动、表情、唇动等多个模式的协同动作表达语义,头动是其中的一个重要模式,主要体现在以下两个方面:部分手语词的定义包含头动;韵律信息经常借助头动进行传递,以起到增强语义、变换句意的作用,或反映表达者的情感。在手语合成中忽略头动,不仅影响手语动画的真实感,还会在一定程度上降低手语动画的可懂度。  为了实现包含头动和手势的多模式中国手语表达,本文通过运动捕获设备采集手势和头动的数据,建立了中国手语韵律库,并从两个方面实现了中国手语表达中带有韵律的头动:1)基于头动表达上下文语义的情况。本文面向中国手语表达中上下文语义相关的头部动作建立头部动作数据库,针对合成过程中的语义冲突问题,本文建立语义冲突解决规则集以实现头动的选择;针对合成过程中的时间冲突问题,本文对帧数少的关键帧采取最后一帧补齐的方法实现手势关键帧和头动关键帧数目的一致。2)手语数据中定义的头动在强调语境下的表达。针对强调语境下的头动,本文提出一种基于运动偏移映射的方法用于合成任意幅度的头动。  实验结果表明,本文提出的多模式中国手语合成方法可有效合成带有韵律的、包含手势语头动的多模式中国手语动画,更好地传递自然文本中的韵律信息,有效提高手语动画的真实感和可懂度。
其他文献
随着全球一体化进程的迅速迈进,人们对网络通信技术的依赖程度日益提高,传统的地面网络已经不能满足人们实时性、综合性的服务需求,具备全球覆盖、多种功能、自主运行、轨道互补
图像压缩是存储和传输图像时的一个重要技术。现有的许多图像压缩方法都是以去除图像的统计冗余为的方式达到数据压缩,很少考虑人眼的视觉冗余,往往无法达到更高的压缩效果。为
随着我国深化医疗改革,区域医疗信息化建设逐渐成为医疗行业信息化建设的重点。在区域卫生信息架构中,患者在院级平台的医疗信息以电子病历的形式存储。由于院级平台致力于电子
随着计算机网络的迅速发展和广泛应用,各种网络安全威胁层出不穷,网络安全问题成为当前亟待解决的问题。可信计算从计算终端入手,以硬件可信模块为核心,通过可信传递构建计算平台
“基于Erlang/OTP的虚拟计算平台UniAS”是一种面向企业内网络资源的虚拟计算环境,可为程序运行提供稳定的虚拟资源视图,将程序的运行环境从单机透明延伸到网络。这一多机跨
企业信息化建设的深化和进一步发展,产生了海量的数据。同时,业务逻辑的多变使得数据模式也在不断调整变化。企业信息决策也需要提取和分析海量的来源于Web的数据。如何有效
安全协议是网络安全中重要的组成部分,其安全性质(如保密性、数据完整性)直接影响着网络数据交换能否顺利进行。对安全协议常使用形式化分析方法进行研究。在形式化分析时需要对
在信息技术和产业高速发展的背景下,危害信息安全的事件不断发生,堵漏洞、筑高墙、防外攻,实行“防、堵、卡”的传统作法往往捉襟见肘,无法抵御日益猖獗的各种进攻。人们逐渐认识
三维城市模型是城市复杂的空间结构在计算机中的重现,具有动态性、交互性、真实性等特点。但是在三维城市模型中,由于三维场景的可读性不强,城市的形象表达并不充分,比如在一个陌
随着虚拟机的广泛应用,虚拟化技术已成为云计算领域的一项关键的支持技术。为提高虚拟机的性能,研究人员花了很多的精力去减小虚拟化的开销。其中一个很大的关注点是内存虚拟化