论文部分内容阅读
手语是听力障碍者在日常生活、工作中与人交流、表达意图的主要手段,然而当今社会中信息传播的主要方式都是建立在自然语言之上,对听力障碍者接受信息、融入社会主体造成极大的困难。手语合成研究的主要目的就是提供一种准确、普适且高效的生成手语表达的方法,为听力障碍人群创建更广阔的信息平台,实现无障碍的交流。
从手语动画合成的研究方法上看,方法主要分为两类:一种是基于视频的方法,另一种是基于参数的方法。目前,国内外主要采用的还是基于参数的方法,技术上也比较成熟,但是基于视频的方法也有其自身的特点,该类方法通过将预先采集的手语视频数据,根据语义或一定的语法规则分割成若干短片段,在合成阶段通过视频片段重组,合成新的手语视频。迄今为止,基于视频的方法在国内和国外的研究还不是很广泛,但由于这种方法的可行性和真实感方面的优势,越来越多的人开始关注这一领域,近几年也取得了不错的进展。
本文研究基于视频拼接的中国手语动画合成,研究内容包括视频语料库建立,以及基于视频重组的手语动画合成方法。本论文采用计算机技术将自然语言文本句子转换为手语文本,论文主要完成的工作包括:(1)开发了针对中国手语合成的视频标记系统,对视频帧中人体各部件的位置及形态表示参数进行信息标注;(2)采集特定语言环境下的手语视频数据,并经过标注后,建立视频语料库;(3)在输入文本形式的天气信息后,结合已有研究成果,完成文本切分、手语词剪辑片段搜索、视频拼接等工作,实现了一个面向天气预报领域的中国手语视频合成原型系统。