标记文本驱动的带韵律手势合成方法研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:cau_hechun1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手语作为一种多模式协同的视觉语言,是听力障碍者在工作与生活中与他人交流的主要手段。中国手语词的数量远少于标准汉语,大量的信息都蕴含在丰富的视觉韵律中。已有的中国手语合成研究能够实现自然文本中汉语词到手语词的动画转换,转换过程忽略中国手语的韵律信息,这在一定程度上影响了合成效果的可懂性。通过分析文本的语境可以预测要表达的韵律,但现有的自然语言处理技术还不能解决这个问题。中国手语标记语言(Chinese Sign Language MarkupLanguage,CSLML)制订了一套通过人工标注自然文本中汉语词的韵律信息转换为可供合成使用的脚本描述方案。   本文在CSLML的基础上,设计并实现了中国手语标记语言文本编辑工具,用于交互式地对文本加入CSLML功能层关于强调状态的韵律标注信息,生成含有韵律层参数的标记文本。   如何基于CSLML文本中的音韵层参数实时合成用户要求的韵律效果是需要解决的一个问题。本文针对强调韵律特征的绘制展开研究,强调韵律特征是中国手语表达中普遍的一种现象,表现为同一手语词在不同的强调副词或形容词的影响下手语动作的幅度和速度会产生变化,但整体的运动特征保持一致。中国手语强调韵律特征在数据层的表现与广泛应用于交互式动画场景的运动风格转换问题在本质上是一类问题,即对输入的运动数据经过相关算法处理后产生出保留原始运动特征的新的运动数据,新的运动数据较原始运动相比有着自己独特的风格表现。   本文在对中国手语表达中手势运动数据分析的基础上,基于非线性放大思想提出了一种合成任意幅度手势的中国手语手势合成方法,用于强调韵律特征的绘制。对同一手语词的中性程度和最大强调程度原始关节角度数据提取关键帧,对两组关键帧数据进行动态时间规整,保证同一时间点的两组动作关键帧的幅度近似,最后求解基于非线性放大思想构造的幅度变换公式中的最优参数。绘制时结合中国手语标记语言进行驱动,实验结果表明,本文提出的合成方法不受运动形态的约束,可以实时逼真地表现出不同强调程度下的手势合成效果。  
其他文献
内存访问延迟一直是制约计算机系统整体性能的瓶颈,计算与存储之间性能上的鸿沟导致CPU的运算能力因访存操作而产生大量的空等时间。Cache技术可以有效地缓解或隐藏存储访问
随着虚拟化技术的广泛应用,虚拟机开始广泛应用于各种数据中心和高性能计算平台,因此对虚拟机的物理载体--虚拟磁盘文件的备份需求也越来越强烈。传统的文件同步技术如rsync、R
基线是星载InSAR的关键参数,基线测量精度直接影响星载InSAR数据的应用效果。激光干涉测量技术以其特有的大测量范围和高测量精度优点,广泛应用于精密测长领域。为了将激光干
无线传感器网络被列为21世纪最有影响力的和改变世界的十大技术之一,其在科学研究、环境监测、日常生活等领域的作用越来越重要。无线传感器网络网关在整个传感器网络起着桥梁
众核技术已成为当前处理器体系结构发展的必然趋势,如何对众核处理器设计进行有效而充分的验证,成为众核处理器芯片能否流片成功的关键因素之一。根据有关的研究数据,目前多数的
有效载荷系统的集成测试是空间有效载荷研制过程中的一个重要环节。实现对有效载荷系统的智能测试,对提高测试的效率、准确率和降低人力成本具有重要的意义。因此,有必要对有
语音对话是人们进行交流的最普遍的方式。当前对对话语音进行分析的需求越来越大,因此,限定领域对话的语音识别研究的重要性也越来越大。   限定领域对话语音识别在实用化
科研管理是科研活动的重要组成部分,其信息化水平直接影响着科研管理的效率、能力和科研工作者的积极性、创造性以及研究机构的整体竞争力。因此,建立一套以决策支持系统为核心
随着网络的普及和深入应用,当今万维网(Web)汇聚了极其丰富的信息资源,在这种信息爆炸的网络环境下,人们不再满足于门户网站、搜索引擎这种主动信息获取方式,更期望通过内容监测,
访存性能一直是现代处理器中的性能瓶颈。访存部件(Load Store Unit,LSU)是超标量处理器中专门用于处理与访存相关一类指令执行的功能部件。由于访存指令的执行效率直接影响