一种融合知识与Res-ViT的特征增强多模态情感识别模型

来源 :数据分析与知识发现 | 被引量 : 0次 | 上传用户:supperprecom
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
[目的]改善多模态特征提取的质量,提高对多模态舆情中用户情感的识别精度。 [方法]针对文本模态,使用RoBERTa进行特征提取,并通过知识短语表征词典进行知识增强。针对图像模态,整合ResNet与视觉Transformer,提出Res-ViT(ResNet-Vision Transformer)模型。特征融合部分使用Transformer编码器,最后将多模态表示输入到全连接层中进行情感识别。 [结果]在MVSA-Multiple数据集上,情感识别的准确率、F1值分别为71.66%、69.42%,准确率较基准方法的最高值提高2.22个百分点,F1值提高0.59个百分点。 [局限]未使用其他数据集进一步验证模型的泛化性与稳健性。 [结论]所提出的模型能够更好地提取多模态特征,并对其进行有效融合,提升了多模态情感识别的能力。
其他文献
报纸
数学是由大量符号组成的学科,学习数学,离不开对符号的掌握与运用,发展学生的符号意识既是提高学生数学素质的需要,也是课程改革的要求。但是,我国学生符号意识的发展仍止步不前。本文以朱立明构建的数学符号意识分析层次为理论基础,进行测试卷的编制,调查初中生数学符号意识的现状,探析初中生符号意识的具体差异,并从差异和学生使用符号的薄弱之处入手,提出相应的培养策略。通过对鞍山市某初中的全体学生进行符号意识现状
学位
我国是世界上柿子产量最大的国家,产量占全球柿子总产量的70%以上。柿子种类繁多,可制作成不同的产品进行销售,因此具有广阔的发展空间。根据柿子及其制品的销售情况来看,陕西富平柿饼是目前国内柿子制品中销量较好的一类。本文结合富平柿饼的地理优势和自身营养价值等特点,对富平柿饼的安全生产技术进行深入分析,为富平柿饼的生产提供资料借鉴。
期刊
欧盟为了应对碳泄漏问题引入了碳边境调节机制,并将于2023年投入运行,待过渡期结束后正式收取费用。欧盟碳边境调节机制目前仍受到WTO规则对其合法性的质疑,根据目前碳边境调整机制的设计,欧盟有望援引GATT20条(b)(g)条款作为其抗辩理由。除应对碳泄漏问题外,欧盟碳边境调节机制的运行将会增加他国产品的出口成本,降低国外产品的竞争力。中国作为欧盟的重要贸易伙伴,一旦CBAM得到正式运行,将对中国的
期刊
目的:通过对银屑病住院资料进行回顾性分析,初步了解江西地区银屑病合并代谢综合征的患病情况,同时探讨银屑病与代谢综合征的共病特征与危险因素。方法:登录南昌大学第一附属医院及江西省皮肤病专科医院住院系统,筛选就诊区间为2016年1月-2021年12月且数据较为完整的成年银屑病病例,根据拟纳入的观察项目收集整理数据,采用SPSS26.0软件进行统计学分析。结果:1.共纳入成年银屑病205例,有35例合并
学位
目的:基于腺苷酸活化蛋白激酶(AMPK)/哺乳动物雷帕霉素靶蛋白(mTOR)信号通路,探讨古方黄芪散(HQS)调节自噬减轻小鼠肝脏脂肪变性改善非酒精性脂肪肝(NAFLD)的作用机制。方法:通过数据库收集HQS主要化学成分以及NAFLD相关靶点,对交集靶点进行基因本体(GO)分析和京都基因与基因组百科全书(KEGG)信号通路富集分析、构建蛋白质-蛋白质相互作用(PPI)网络,并进行体内实验验证。雄性
期刊
文章以教育专业舞蹈教育方法研究为切入点,探索舞蹈教育特殊的规律。自新中国成立以来,几代舞蹈教育家总结出的教学方法仍然影响着今天的中国舞蹈教育。另外,不同于以往的是,北京舞蹈学院教育学院成立5年来,尤其是本科教育、未来中小学舞蹈教育、素质教育等方面将成为新课题、新方向。基于此,舞蹈教育工作者开始进行尝试性的探索,加强多种教学方法、教育观念的探索。出于教书育人的责任,舞蹈教育工作者还没有过快地脱离以往
期刊
2017年春季(4月)、夏季(7月)、秋季(11月)对永定河流域23个样点的大型底栖动物、水环境和水文因子进行了野外调查,分析了永定河流域大型底栖动物功能摄食类群的群落组成与时空分布特征及其对河流生境变化的响应情况。永定河流域3个季节共采集到大型底栖动物78种,隶属3门6纲39科,其中,春季52种、夏季50种、秋季53种,功能摄食类群以收集者占绝对优势,其次为捕食者,刮食者、滤食者、撕食者所占比例
期刊
我国立法和司法解释虽然确立了惩罚性赔偿制度,但未明确在消费民事公益诉讼中能否提起惩罚性赔偿请求。在消费民事公益诉讼司法实践中对于能否提起惩罚性赔偿金处于混乱状态,既有支持者也有不支持者。作为维护公共利益的消费民事公益诉讼应当允许提出惩罚性赔偿诉讼请求。对于这一赔偿损失在计算时应将之前的行政处罚、刑事罚金与之折抵或扣除。惩罚性赔偿金应以3倍为宜,检察机关或法院可以根据案情对过高的赔偿金酌情减少。惩罚
期刊
<正>研究目的:(1)爬梳并总结中国传统弹弓术的发展历程。整合涉及射箭、弹弓发展史的文献,总结分析弹弓的发展与演变历程。(2)通过SWOT分析分析我国弹弓发展面临的优势、劣势、机遇和挑战。(3)创新弹弓术的传承路径。深入解析文化国宝传统弹弓术的新"活法",切实提出破解路径。研究方法:(1)文献资料法。(2)SWOT分析法。(3)专家访谈法。(4)逻辑分析法。
会议