融合多重注意力机制的人眼注视点预测

来源 :中国图象图形学报 | 被引量 : 0次 | 上传用户:jtzou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目的 经典的人眼注视点预测模型通常采用跳跃连接的方式融合高、低层次特征,容易导致不同层级之间特征的重要性难以权衡,且没有考虑人眼在观察图像时偏向中心区域的问题。对此,本文提出一种融合注意力机制的图像特征提取方法,并利用高斯学习模块对提取的特征进行优化,提高了人眼注视点预测的精度。方法 提出一种新的基于多重注意力机制(multiple attention mechanism, MAM)的人眼注视点预测模型,综合利用3种不同的注意力机制,对添加空洞卷积的ResNet-50模型提取的特征信息分别在空间、通道和层级上进行加权。该网络主要由特征提取模块、多重注意力模块和高斯学习优化模块组成。其中,空洞卷积能够有效获取不同大小的感受野信息,保证特征图分辨率大小的不变性;多重注意力模块旨在自动优化获得的低层丰富的细节信息和高层的全局语义信息,并充分提取特征图通道和空间信息,防止过度依赖模型中的高层特征;高斯学习模块用来自动选择合适的高斯模糊核来模糊显著性图像,解决人眼观察图像时的中心偏置问题。结果 在公开数据集SALICON(saliency in context)上的实验表明,提出的方法相较于同结构的SAM-Res(saliency attention modal)模型以及DINet(dilated inception network)模型在相对熵(Kullback-Leibler divergence, KLD)、sAUC(shuffled area under ROC curve)和信息增益(information gain, IG)评价标准上分别提高了33%、0.3%和6%;53%、0.5%和192%。结论 实验结果表明,提出的人眼注视点预测模型能通过加权的方式分别提取空间、通道、层之间的特征,在多数人眼注视点预测指标上超过了主流模型。
其他文献
期刊
<正>什么是语文?一边是无法碾平的时光,一边是从容“翻新”的世界,将生活的栏杆拍遍,看岁月的细水长流,语文的热力与魅力都未曾消减,持续地牵引着我去聚焦它的意义之光。对语文的认知,是在“熟知”中确定“真知”的过程,也是在“感性”中觉知“理性”的过程。——语文是思想者的事业。语文是年轻同人们用心镌刻的案头“山水”,材料取舍、结构布局、前后勾连、左右对称……用足审美小心思,畅想课堂好风光。清晰记得开始教
期刊
采用植物乳杆菌(植)、嗜酸乳杆菌(嗜)、副干酪乳杆菌(副)进行两两混菌发酵制备清洁标签铁皮石斛发酵汁,比例均为1:1。分析72 h发酵过程中铁皮石斛汁的活菌数、pH、总糖、总酚、抗氧化能力的动态变化以及活性成分与抗氧化能力的相关性。结果表明,3种混菌均能在发酵铁皮石斛汁中良好生长,其中活菌数最高的一组是嗜+副,活菌数为8.72 lg(CFU/mL)。对多糖消耗最少的是嗜+副,比初始值降低了24.8
目的 观察针刺联合麻杏石甘汤加减对重症急性胰腺炎(SAP)相关性肺损伤(ALI)及外周血中性粒细胞明胶酶相关脂质运载蛋白(NGAL)、Toll样受体4(TLR4)的影响。方法 选取SAP并发ALI患者80例,按随机数字表法分为对照组与观察组各40例,对照组给予常规治疗,观察组加用针刺联合麻杏石甘汤加减治疗。对比两组临床症状及预后性指标,治疗前后评价急性生理与慢性健康评分(APACHEⅡ)、序贯器官
第三代蓄热式钢包烘烤器采用双蓄热及分级燃烧技术,具有高效节能和环保的特点。韶钢炼钢工序通过技术改造,淘汰原来的单蓄热式烘烤器,采用双蓄热及分级燃烧的第三代烘烤器,收到了好的节能效果。文章主要介绍了双蓄热烘烤器的原理、项目的改造内容及改造效果。
以构建小学数学“致用学堂”为基点,本文对如何发展学生核心素养进行了研究。文章先简要分析了传统小学数学教学在发展学生核心素养方面存在的问题,然后提出了关注趣味教学、善用情境、信息化教学、符号化答题、想象迁移等策略,希望以此教学研究,为教师在“致用学堂”中发展小学生数学核心素养带来一些启发。
如何以数字化转型带动服务实体经济能力提升,是当前商业银行面临的重要挑战。虽然大型商业银行在行业占据主导作用,但是从促进经济高质量发展和推动普惠金融创新等方面来看,中小银行的意义更重大。因此中小银行更加迫切地需要通过加快数字化转型,既实现可持续发展,又在金融供给侧改革中发挥更大作用。论文从研究背景、文献梳理、现状与挑战、战略重点、外部保障等多视角对此展开深入分析。
莫兰迪的画面总是给人以静谧的印象,其作品中反复出现的瓶和罐通过巧妙的组合展现出了宁静平淡的氛围。这种宁静平淡不仅出现在他的作品中,在现实生活中的莫兰迪也是处于一种宁静平淡的状态。艺术在他当时的年代出现了各种面貌,莫兰迪对艺术的探索也经历了几次转变。对印象派绘画的喜爱让莫兰迪开始探索艺术,但印象派的绘画方式并没有在莫兰迪的画作中出现。未来主义和立体主义绘画的尝试让莫兰迪明确其作品中的物体本质是不能破
冷冻是通过抑制微生物生长和降低酶的活性来延长肉品保质期的有效方法,但由于传统的冷冻过程速度缓慢,容易在肉品的细胞间隙形成大而不均匀的冰晶,损伤肉品的肌肉组织,导致肉品质量下降。超声波辅助冷冻技术作为一种新型冷冻技术,能够加快肉品的冷冻速度,在肉品冷冻过程中控制冰晶的形成和生长,控制冰晶的大小和分布,提高结晶率,缩短冷冻时间,减少在冷冻过程中冰晶对肉品肌肉组织结构的破坏,从而提高冷冻肉品的品质。文章