【摘 要】
:
随着不同纵横比的显示设备数量激增,图像与显示设备的不匹配问题使缩放技术成为图像处理研究的一个热点问题。基于内容感知的图像缩放方法在缩放过程中使图像的变形尽量发生在相对不重要的区域,但当对主体过大或背景复杂等图像缩放时会产生主体变形严重或全局语义丢失等问题。而基于深度学习的图像缩放方法提取图像的高层语义特征指导缩放过程,能够缓解全局语义丢失,但会产生低层语义缺失。针对上述问题,本文提出两种图像缩放方
论文部分内容阅读
随着不同纵横比的显示设备数量激增,图像与显示设备的不匹配问题使缩放技术成为图像处理研究的一个热点问题。基于内容感知的图像缩放方法在缩放过程中使图像的变形尽量发生在相对不重要的区域,但当对主体过大或背景复杂等图像缩放时会产生主体变形严重或全局语义丢失等问题。而基于深度学习的图像缩放方法提取图像的高层语义特征指导缩放过程,能够缓解全局语义丢失,但会产生低层语义缺失。针对上述问题,本文提出两种图像缩放方法:一是提出一种能量转移的图像缩放方法ET-CAIR(Energy Transferring for Content-Aware Image Resizing),用以解决基于内容感知的图像缩放存在的问题;二是提出一种改进金字塔池化模型的图像缩放方法ISPP-IR(Improved Spatial Pyramid Pooling for Image Resizing),用于提升深度学习图像缩放中低层语义。论文主要工作包括:研究了内容感知的图像缩放,提出了ET-CAIR方法。ET-CAIR改进了缝裁剪,并与均匀缩放构成多操作。其中,在缝裁剪中融合了图像的梯度图、视觉显著度图与人脸图构成重要度图;在提取最佳接缝时提出了一种能量转移规则,用于保护最佳接缝的邻域像素,避免移除或者复制最佳接缝时大量接缝穿过同一区域;同时提出一种客观相似性评价用于检测缝裁剪算法对图像的变形度,若超过阈值,转为均匀缩放方法达到目标尺寸,使得目标图像不会发生明显变形,最大程度保留了全局语义。研究了基于深度学习的图像缩放,提出了ISPP-IR方法。ISPP-IR是基于编码器和解码器的图像缩放方法,能够端到端嵌入到图像缩放框架中。其中,编码器为经过预训练的Res Net分类模型,解码器为改进的金字塔池化模型,即金字塔池化模型与上采样模型的多层级联,上采样模型渐进采样到所需尺寸的目标图像,通过内容损失函数和结构损失函数之和来控制整个ISPP-IR网络的反向传播。ISPP-IR方法能够有效提取特征的局部与全局语义信息,并保留原图像中的局部低层语义。在MIT Retarget Me和MSRA数据库上对ET-CAIR算法进行验证,将ET-CAIR缩放结果与四种主流的图像缩放算法进行对比,并进行主观评价与客观质量评价,结果表明ET-CAIR方法具有更好的缩放效果;在VOC2007数据库上对ISPP-IR网络进行了训练,将ISPP-IR缩放结果与深度学习的图像缩放方法、内容感知的方法和ET-CAIR算法进行对比,实验结果表明ISPP-IR方法的缩放图像视觉效果较其他方法更优。
其他文献
砂石料的日益短缺已经严重阻碍我国各地区公路工程建设的发展,同时数量庞大且再利用率低的工业废弃土占据大量的场地空间,甚至造成环境污染。论文依托北京市市政工程研究院的科研项目,展开工业废弃土应用于公路工程基层底基层中的室内试验研究,最终验证了经过固化处理后的工业废弃土可以应用于公路基层底基层中。论文针对山东枣庄某地区两处工业废弃土的特点,借鉴国内外相关文献研究成果,展开应用常规土壤固化技术处理工业废弃
结构光测量技术因具有测量速度快与精度高等优点而被广泛应用于3C电子制造产业中各种复杂微细元器件的检测。但由于传统结构光测量技术中投影仪存在非线性Gamma效应和最高帧率只有120Hz,且相机与投影仪需精确同步等缺点,限制了结构光测量精度和速度。为此,本文深入开展结构光测量技术研究,提出基于离焦投影的混合二值条纹编码解码算法、相机与投影仪高速触发和离焦系统参数标定等相关算法,在保证测量精度下提高三维
近年来中国经济始终保持着高速稳健的发展态势,但是从产业结构来看,目前我国的工业化发展严重依赖于煤炭、钢铁、电力、石油化工、交通运输等高能耗、高污染的传统产业,产业结构过度集中,化石能源比例高,结构性污染十分突出。作为中国工业化和城市化的领跑者,京津冀及珠三角经济区的经济总量规模、经济发展速度、区域发展潜力都处于全国领先水平,其空气质量受到了广泛的关注。本研究利用日历视图结合点格图的可视化表达手段,
相变存储器(Phase Change Memory,PCM)是一种新型的非易失随机访问存储器,同时也是最有潜力的下一代通用存储器。它具有高存取速度、非易失性、高容量、工艺简单和可变位等优
嵌入式系统设备已经逐渐融入人类社会的各个领域。然而,电子设备上的能耗和性能之间的矛盾也日益突出。DVFS(动态电压和频率缩放)技术为缓解设备能耗与性能之间矛盾提供了可
人的哲学是苏联马克思主义哲学学科中的重要门类。推动人学研究不断深入的重要人物是前苏联哲学研究学会的会长、科学院院士、哲学博士弗罗洛夫教授。他作为苏联时期的马克思
由于当前经济水平的不断提升,消费者对餐饮方面的需求更加趋于多元化和复杂化,要想有利于企业的发展,就需要有科学、合理的的营销策略与之相配,以适应市场的变化。本文通过采用现场调查、文献分析等多种分析方法,为优化企业的营销策略提供具有科学性以及实际应用性的建议。本文将H集团餐饮管理有限公司为主要研究对象,通过客观地对该公司进行内外部环境分析;运用SWOT分析工具找出该公司存在的优势、劣势,以及可能出现的
我国配电网通常采用经消弧线圈接地或中性点不接地方式,单相接地故障发生后,由于故障电流微弱等反映故障特征的信息不明显,定位比较困难;对于短路故障,传统的故障定位方法现
研究背景高尿酸血症(Hyperuricemia,HUA)目前已被证实与高血压、动脉粥样硬化和冠心病等多种心血管疾病密切相关。血管内皮是预防心血管疾病的第一道防线。内皮细胞(Endothelial Cells,ECs)能合成和分泌多种活性物质,保证血管正常的收缩和舒张功能,维持血管张力。正常的血管内皮细胞对心血管系统有重要的保护作用。现有的研究表明,高尿酸可以通过多种机制造成血管内皮损伤。因此,减少
社会的发展和科技的进步催生了服务机器人的产生与应用。近年来,随着社会生活的改善和老龄化问题加剧,服务机器人的重要性愈发得以凸显。如何让服务机器人使用自身所佩戴的传