基于交叉对齐方法的中文文本风格转换

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:qq709532845
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人工智能技术的不断发展过程中,文本和图像的风格转换是对人工智能发展水平的重要衡量标准,然而语言风格转换滞后于图像的风格转换。由于图像是连续的,可以通过转换函数直接学习和优化,使得图像的风格转换实现起来较为简单,而语言的不连续性增大了研究的难度。在自然语言处理领域的研究中,需要大规模平行语料的支持,但是目前平行语料库的规模十分有限,尤其是在新兴领域,平行语料的数量更是匮乏。对于英文文本,国外已有一些研究能够实现跨语料库的文本风格转换,但是中文的风格转换缺少相关的研究。基于此,本文结合现有的交叉对齐方法和中文语言的特点,实现中文文本的风格转换,本文所做的工作如下:1.中文数据集的获取及处理。在本文中,用到的数据集是公开的豆瓣电影的评论数据,原始数据集包含200多万条评论。为了使数据满足模型的需要,本文主要对原始数据进行了以下处理:将原始数据按照评级分为正面数据和负面数据;将正、负面的句子按照词的个数分为短评论文本和长评论文本;对数据进行去除停用词和命名实体词识别。2.中文文本风格转换及评估。现有的文本风格转换都是基于英文文本的,本文借助交叉对齐方法实现了中文的文本风格转换,并在真实语料库中进行验证。通过两个衡量指标——风格转换强度和内容保留程度,分析了短评论文本、长评论文本和yelp英文短评论的转换效果。风格转换强度通过Libsvm分类器,计算转换到目标风格的句子占总句子的比例来衡量,中文短评论和yelp评论相比,从正面转换到负面的转换强度差距较大,从负面到正面的转换中英文差距较小;短文本的风格转换强度总体上比长文本的风格转换强度要高。内容的保留程度是通过计算文本的余弦相似性,中文的内容保留程度总体上略高于英文;中文长、短评论之间的内容保留程度,短评论的保留程度高于长文本。
其他文献
目的研究新疆昆仑雪菊水提物对小鼠肠道短链脂肪酸的影响。方法 C57BL/6小鼠随机分为4组:空白对照组(n=10)、高剂量组(n=10)、中剂量组(n=10)和低剂量组(n=10),给药14 d,用气
全球气候变化背景下,明确气候变化对青藏高原濒危植物地理分布的影响,对未来濒危植物的保护、适应策略的制定及保护区的规划建设具有重要的意义。本研究选取BCC-CSM4、Had GE
一 1977年程百鸣考入S大学中文系的时候,整三十岁,是全系年纪最大的学生,而且已婚,儿子都有了。他老婆廖元芳在一所中学教化学,跟他一起参加了"文革"后的第一次高考,但是没
为研究综放采空区高位钻孔注浆不同注浆时间和注浆量对浆液空间扩散行为的影响,采用FLUENT数值计算方法,在"变重力、定倾角"注浆情况下,构建三维非均质采空区浆液扩散数学模
目的探讨骨三相显像对人工关节置换术后松动与感染的鉴别诊断价值。方法 108例(人工置换关节96个)行人工关节置换术的患者,均采用骨三相显像技术鉴别和诊断术后松动与感染情
首届中国中部文化产业博览会10月底在武汉国际会展中心举行,我市大打“生态文化”品牌,展示了一批独具特色,并具有较大开发潜力文化旅游项目,受到客商和参观者的青睐,其中通山明清
报纸
目前城市化的发展越来越快,资源利用率也呈现出较低的水平,其中最突出就是建筑资源正在不断减少,因此,发展绿色建材成为目前研究专业的重中之重。本文主要研究的是将废弃砖块破碎研磨成粉,采用“双掺双代”的方式应用到模塑板粘结砂浆中,以此得到一种绿色的粘结砂浆,促进建筑资源的循环利用。通过对废弃砖块的抗压强度试验和对废弃砖块研磨成粉的相关物理性能试验,发现所使用的砖块强度低,处理后得到的废弃砖粉是多孔结构,
数字珠玑:2010年,全镇实现生产总值预计4.2亿元,全年工农业总产值预计可达3.95亿元,镇级财政总收入预计430万元,农民人均年纯收入预计5518元。按照发展规划,到“十二五”末的2015年
期刊
唯有小说,才能把处于完整的、独特的、短暂的现实之中的存在的原始涌现表现出来。——波伏瓦阅读马金莲的作品会对这个作家生出怜惜乃至痛惜来,这在我长时间的阅读经验中是少
期刊
随着经济的快速发展,城市规模和城市人口不断扩张,城市建设对湖泊、河流等影响逐步加剧,环境问题随之增多。滨水绿地所承载的保护城市生态,优化城市格局的作用越来越显著。景