基于深度学习的语音疲劳检测

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:lmh860628
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
车站值班员担负着统筹协调铁路运输各方面的工作,要全盘把控车站运输资源的调配,及时应对设备故障、临时限速、计划调整等各种突发情况。长时间的高强度紧张工作会导致生理和心理的疲劳,给铁路运输带来安全隐患。现阶段,为了保障值班员的良好工作状态,仅仅采取了待岗休息2小时的措施,而对在岗期间的工作状态缺乏监管,为了应对疲劳带来的运输安全风险,对车站值班员的工作疲劳状态进行实时检测和评估具有重要的研究意义。语音承载着大量的人体疲劳状态信息,鉴于车站值班员工作中需要进行大量的语音呼叫应答,为了解车站值班员疲劳信息,降低因车站值班员疲劳给列车带来的安全隐患,本文基于深度神经网络学习方法,利用车站值班员工作语音检测其疲劳状态。本文的主要工作如下:(1)采集语音数据样本,建立疲劳语音数据库。定义了正常、稍微疲劳、非常疲劳三种人体疲劳度,设计了300句值班员日常用语,录制样本的受试者来自于中国且带有不同地区口音的15名志愿者,其年龄分布在20-45岁之间,2名女性,13名男性,人工录制并标记了5033条语音样本,以此样本建立了车站值班员疲劳度检测语音数据库(Train Attendant Fatigue Detection Corpus,TA-FD)。(2)建立基于注意力机制的循环卷积神经网络(Attention-based Convolutional Recurrent Neural Network,ACRNN)模型,进行了语音疲劳状态识别实验。网络模型由卷积神经网络、长短时记忆网络、注意力机制层所组成。实验结果表明,ACRNN模型在TA-FD数据集上的准确率为89.67%。与卷积神经网络和循环卷积神经网络模型相比,ACRNN模型识别准确率分别提高了5.49%和3.74%。(3)为进一步提高语音疲劳度检测准确率,提出了一种基于胶囊网络的循环卷积神经网络(Convolutional Recurrent Neural Network augmented with Capsule layer,CRNN-Cap)对疲劳语音进行分类,建立了一种适用于语音疲劳度分类的CRNNCap模型。网络构架由卷积神经网络、长短时记忆网络、胶囊网络组成,由此完成对输入信息的特征提取,最后的结果分为三类,即三种疲劳状态。实验仿真结果表明,CRNN-Cap模型在TA-FD数据集上的准确率为93.44%,比ACRNN模型的分类准确率提高了3.77%。
其他文献
断裂带在地壳流体渗流领域一直被视为关键因素。作为一种脆性构造,其通常伴生有复杂的裂缝系统,为地下流体渗流提供了重要通道,影响着油气藏、矿床、地下水等的运移和储存。
多核金属纳米团簇因其精美的结构、丰富的物理化学性质以及在分子磁体、催化和分子电子学等众多领域的潜在应用而备受关注。近年来,越来越多的科学研究者致力于新型多核金属
公共文化服务体系的建设直接影响到公众享受的各种文化权益,十八大报告中提到,建立健全公共文化服务体系,进一步改善公共文化服务效率,争取在2020年构建起完善的公共文化服务体系。习近平在其讲话中提到,公共文化服务体系的建设与社会的发展、公众权益的维护存在密不可分的联系,为顺利完成当前的奋斗目标,我国必须将公共文化服务机构的建设当作一项重要工作,文化是整个民族的灵魂,公共文化服务体系的建设与中国梦的实现
坨11南沙二段8砂组油藏是三角洲前缘沉积环境下的整装断块油藏,地质条件复杂。油藏自1965年投入开发至今,已进入特高含水后期,部分高渗层中已形成高耗水带,呈现出综合含水率
本文选择常州市紫荆公园、荷园、西林公园作为研究对象,通过案头研究,实地调研、问卷调查和现场访谈的方式,从对象本身和游客反馈两个方面,对常州市开放式植物主题公园的现状
随着超网络领域的研究不断深入,超网络已经逐渐发展成为分析和解决问题的新途径和新方法。超网络相对于复杂网络,能够更好的反映出不同要素之间的联系,从而使得通过超网络的
随着信息时代的发展,我国大数据技术成为了城市管理和发展智慧化新思路的基础,城市信息化和数据化的变革对人们生活的影响逐渐深入。这一领域的影响力已经成为了政府和管理者
目前,农村留守人员主要为老年人、妇女和儿童,由于他们年龄、文化和能力有限,对新农业技术认识和接受能力有限,加上长期在落后的农业生产观念影响下,新技术消化、吸收比较缓
基督教与佛教、伊斯兰教并称世界三大宗教。至今,除日本外的主要发达国家都是基督教文化主导的国家。20世纪,除了南美、非洲、亚洲的韩国等地,中国也是基督徒人数增长最快的地区和国家之一。基督教的主要活动之一——布道及其口译对其传播起到了重要作用。尽管如此,目前学术界主要局限于基督教文献笔译研究,口译研究较少。本报告基于模拟英汉交传实践报告,材料来源于约翰·派博(John Piper)牧师在2019福音联
磨边机是瓷质砖深加工工序中的重要一环,直接影响瓷质砖生产精度和产品质量,而横梁组件作为承载磨边轮、压梁、转臂机构等的关键机构,直接关系到磨边机的生产性能和加工质量,