【摘 要】
:
图像作为重要的信息载体,其质量的高低直接影响了信息表达的能力,因此图像超分辨率技术凭借其恢复高质量图像的强大能力在许多领域有着广泛应用。相较于传统二维图像,光场图像满足了人们对高维信息的需求。但是,主流光场相机捕获的光场图像始终存在空间分辨率和角度分辨率的权衡,面临着图像分辨率不足的问题。深度线索在光场超分辨重建中有着重要作用,但是现有工作大多关注如何利用深度线索,而忽略了对深度线索的深入挖掘与精
论文部分内容阅读
图像作为重要的信息载体,其质量的高低直接影响了信息表达的能力,因此图像超分辨率技术凭借其恢复高质量图像的强大能力在许多领域有着广泛应用。相较于传统二维图像,光场图像满足了人们对高维信息的需求。但是,主流光场相机捕获的光场图像始终存在空间分辨率和角度分辨率的权衡,面临着图像分辨率不足的问题。深度线索在光场超分辨重建中有着重要作用,但是现有工作大多关注如何利用深度线索,而忽略了对深度线索的深入挖掘与精度提升,进而导致超分辨重建效果并不理想。针对上述问题,本文从焦点堆栈和多视角图像两个角度出发,利用焦点堆栈的多聚焦特性和多视角图像的空间特性来合成所需高质量的深度图,并研究了基于深度线索的光场超分辨重建算法。论文主要研究工作及创新点如下:(1)针对现有方法未能很好解决焦点堆栈散焦模糊,导致细节丢失的问题,提出了基于多聚焦信息的光场深度估计方法。该方法主要包含两个模块:上下文推理单元和注意力引导的跨模态融合模块。其中,上下文推理单元充分提取焦点堆栈的多聚焦信息和RGB图像的结构信息,从而全方位探索内部空间相关性。注意力引导的跨模态融合模块通过多级注意力权重逐级融合来自上下文推理单元的内部空间相关信息,从而实现多模态特征对深度预测的最大贡献。实验验证了所提算法的有效性,相比其他方法,该方法可以有效解决散焦模糊造成的细节丢失,对噪声和重复纹理有着更加鲁棒的表现,可为超分辨率等任务提供有利的技术支撑。(2)针对现有方法未能充分利用多视角图像中的空间关系,导致重建光场存在伪影和失真的问题,提出了一种基于深度线索的光场超分辨重建方法。该方法将超分辨率重建分解为两个子任务:视角合成和光场优化。为了超分辨率任务在实际应用中的灵活性,视角合成网络引入了无监督的深度估计模块。此模块通过并行连接和多尺度融合有效学习丰富特征表示以捕获长范围空间相关性,从而改善深度预测。基于预测的深度信息,视角合成网络对输入的稀疏视角进行像素点移位以重建初始光场。基于重建视角间的几何关系,光场优化网络对初始合成光场进行优化以获得最终光场。实验验证了所提算法的有效性,相比其他算法,该方法可以显著改善深度预测,充分利用视角之间的空间关系从具有较大基线的稀疏采样光场重建出高质量的密集光场。
其他文献
隧道掘进机作为一种技术复杂、附加值高的系统化大型隧洞施工机械,其智能化运行依靠数据挖掘技术,借助数据挖掘技术分析隧道掘进机运行数据,对于提升隧道掘进机的运行、分析、维护水平具有重要意义。数据挖掘中的聚类研究对于隧道掘进机运行数据归组分类、运行状态分析十分重要,是数据分析的重要前提步骤。然而隧道掘进机时间序列数据存在维度高、参数之间关联性强的问题,传统数据挖掘方法难以有效应用,缺乏针对隧道掘进机运行
心血管疾病是世界疾病负担的首要原因,主动脉所受到的各项冲击与损耗在心血管中最为严重。因此,对主动脉疾病治疗的研究意义重大。人工血管植入手术是主动脉疾病治疗的最终方案。生物3D打印人工血管在主动脉植入领域具有巨大的发展潜力,但由于主动脉周边约束繁多,本身结构以及内部血流状况较为复杂,因此缺乏在生理层面考虑个体特异性需求的三维模型作为制造基础。人工血管的结构优化设计可以对其几何形态和机械性能加以改善。
金属3D打印是近些年发展起来的一项先进制造技术,理论上可以打印具有任意复杂空间结构的零件,已有模具厂商将金属3D打印技术应用于复杂模具零件的制造,来解决一些模具零件难以加工、加工周期长、成本高等问题。然而在实际生产中,打印过程中的热应力会导致零件的开裂,这严重影响了金属3D打印技术的应用。因此,本文针对3D打印420不锈钢模具零件出现的开裂问题展开研究。主要研究内容如下:(1)首先通过建立420不
铝合金作为工业制造中应用最多的有色金属材料,在金属3D打印发展初期就被众多学者研究,其中激光选区熔化(SLM)工艺3D打印出的AlSi10Mg铝合金零件综合性能良好,应用较为广泛。与传统制造工艺相比,SLM打印的AlSi10Mg铝合金零件基本力学性能更优,模型结构可以更加复杂,但也存在很多不足,如打印效率低、表面质量较差、尺寸精度偏低和后处理过程繁琐等,基于存在的问题,本文主要内容如下:概述单熔道
近年来由于多媒体时代的蓬勃发展,跨模态信息匹配受到广泛关注。作为一项重要的基础研究,它在很多跨模态领域的任务中都起着关键作用,比如跨模态检索问题、图像生成、文本生成、图像或视频问答等等。传统的匹配算法主要从统计分析的角度出发,学者们用典型相关分析、偏最小二乘法等数学算法分析不同模态数据之间的相关联程度。虽然理论上的可解释性比较强,但是这些方法并不能深入理解模态中的语义信息,使得传统的跨模态匹配方法
企业在长期应用CAD技术进行设计活动中积累了大量的三维CAD模型。如何挖掘现有CAD模型的价值,实现对已有设计的重用和参考成为了人们的现实需求。本文利用零件间的约束和配合信息对三维装配体模型检索技术进行了研究。根据装配体中零件间的装配约束与零件间运动关系的映射,将装配体表达成运动关系邻接图。利用改进的VF2算法搜索两个装配体运动关系邻接图最大公共子图,从而得出了两个装配体相似子结构中零件的对应关系
相关统计数据显示,世界范围内宫颈癌的发病率在女性恶性肿瘤中排名第四位,早期筛查,对于降低宫颈癌发病率和死亡率,挽救患者的生命,具有重要意义。目前,宫颈癌的早期筛查主要依靠人工进行。病理医生需要在一张包含数千个宫颈细胞的涂片上通过肉眼观察,寻找癌变细胞。在大型医院中,病理医生每天要处理上百个类似的细胞涂片,存在较大的漏诊风险。针对该问题,本文提出了新的宫颈癌细胞识别方法,建立了包括75个特征的多参量
目的:探讨组织因子途径抑制物2(TFPI-2)对心房成纤维细胞和心房肌细胞功能的影响及相关分子机制。方法:采用ELISA法检测15例心房颤动(AF)患者和15名正常对照血清TFPI-2水平。分离、培养并鉴定SD乳鼠心房成纤维细胞和心房肌细胞。通过CCK-8实验检测0、50、100、200μg/L重组TFPI-2蛋白(rTFPI-2)处理24、48 h对心房成纤维细胞增殖能力的影响。采用Transw
行人再识别是计算机视觉领域的重要任务之一。通过给定一张特定行人的图片,行人再识别技术可以在图库或视频中查找到同一行人的其他图片,从而达到识别行人、检索行人的目的。随着监控摄像头的普及、智能城市的建立以及社会安全的需求,行人再识别技术获得越来越多的重视,因此行人再识别问题的研究有着重大意义。目前流行的有监督行人再识别技术已经取得了巨大的进展,在一些公开数据集上达到不错的性能。但是,这些方法却很难应用
个性化的头部解剖结构数字模型在面部外科手术、头部电磁学和生物力学仿真、人体艺术建模等诸多领域有着重要应用价值。在不方便使用断层扫描影像设备头部影像的情况下,使用面部照片引导个性化头部建模成为一个值得研究的替代解决方案。本研究以课题组开发的可变形中国人群数字解剖图谱为基础,实现三维图谱与二维正面照片的配准,得到对受试者头部及其内部解剖结构的个性化三维建模。本文的主要内容可以分为以下三个部分:(1)基