面向识别与合成任务的动态纹理建模算法研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:oyfj2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
动态纹理是指在时间上具有平稳统计特性的图像序列,时间平稳性表现为统计上的规律性和重复性,是静态纹理统计特性从图像空间至时域延伸的推广。动态纹理在自然界中广泛存在,比如烟雾、海浪、车流等。动态纹理呈现出视觉动态过程,是自然场景的基本组成部分,普遍存在于视频数据中。动态纹理蕴含的时序变化过程能够传递更丰富的视觉信息,在人类视觉感知中起着重要作用,为解决很多计算机视觉问题提供了至关重要的解决方案。动态纹理建模是构建动态纹理表达的数学模型和描述算法,以用于动态纹理识别、合成等相关视觉任务。既不同于静态图像缺少运动信息,动态纹理是随时间连续变化的图像序列;也不同于图像运动分析的光流场,动态纹理的动态过程大多不满足光流亮度保持和局部平滑的约束。因此建模需要顾及动态纹理数据特点,准确描述空间外观和动态变化。并且动态纹理建模的有效性取决于与之关联的视觉任务,需要面向不同视觉任务灵活选取建模方式,以获得解决对应问题的能力。本文对动态纹理建模及其应用的一些关键问题进行研究,包括动态纹理特征提取,识别任务中的特征表达,合成任务中的模型构建,以及动态纹理样本可合成性分析建模。针对以上问题,本文以动态纹理建模为核心,根据建模应用需求的差异,设计不同的模型表达方式,采用任务驱动型的建模策略,主要研究内容如下:(1)针对现有动态纹理特征提取方法缺乏空间几何结构描述的问题,提出基于形状共生模式的动态纹理特征编码方法。研究利用水平集方法对动态纹理空间表观进行拓扑表达,构造纹理图像的形状级联结构,提取形状树中形状基元的不变性特征作为局部的结构特征;利用形状树中节点的隶属关系,构造纹理形状基元的邻接图;在时间维上,将图像序列投影到形状共生模式字典进行编码获取隐含时域信息,结合空间结构信息,达到同时捕获动态纹理空间几何结构和时间平稳特性的目的。(2)针对动态纹理识别中难以建立时空整体联合模型的问题,提出聚合时空特征建模的动态纹理表达。顾及动态纹理数据时间自相似特点,压缩时间冗余性以简化对动态纹理的描述,分别从空间维度和时间维度建模动态纹理的特征表达,采用集成学习多特征融合的方式,通过聚合多种空间和时间纹理特征,提出了一种基于空间外观和动态过程互补特征表达的方法,提高了动态纹理识别的准确率。(3)针对动态纹理合成中现有统计模型约束能力不足,合成结果产生不同程度的细节平滑问题。基于时空卷积神经网络滤波响应的相关统计量构建统计约束模型,同时建模动态纹理的空间-时间统计特征,发展了基于深度学习的动态纹理合成方法。其次,探究了深度模型对动态纹理合成的影响,通过实验测试发现由随机滤波器构造的浅层网络未经训练也能合成平稳动态纹理,说明其二阶统计特性足以表达生成平稳动态纹理的高斯过程。(4)在基于样本的动态纹理合成研究中,我们发现合成结果同时受制于合成算法的有效性和样本的可合成能力,而现有研究致力于提升合成算法,忽略了动态纹理样本的可合成性。针对样本是否可合成问题,我们结合动态纹理识别和合成两方面任务,采用数据驱动的方式,通过建模动态纹理样本特征表达和可合成度之间的关系,学习样本的可合成能力,定量预测动态纹理的可合成度,并为样本推荐合适的合成算法。为动态纹理合成实际应用中的样本和算法选择提供有力支撑。
其他文献
近年来随着经济迅速发展,中高层建筑如雨后春笋拔地而起,但基于低层建筑使用性更强的原因,目前依然有很多低层建筑。本文基于北京市一栋三层的抗震设计展开研究讨论。
本设计贯彻"实用、安全、经济、美观"的设计原则。按照建筑设计规范,认真考虑影响设计的各项因素。根据结构与建筑的总体与细部的关系。本设计主要进行了结构方案中横向框架
从提倡广开学校,创立具有近代化色彩的教育机制,倡导兴办女学,进行全民教育,关注社会教育三方面对宋恕的近代教育思想进行了评述,突出了他对中国教育的近代化做出的贡献。 F
目的 研究玉屏风散加减治疗慢性咳嗽疗效。方法 60例慢性咳嗽患者,随机分为试验组和对照组,各30例。对照组采取普通西医治疗,试验组在对照组的基础上采用玉屏风散加减治疗,比
Join任务图是一种并行处理的基本结构。目前已有的Join任务图的调度算法大多忽略了通信链路的竞争、延迟以及节省处理机的问题,导致算法在实际应用中效率较低。针对这一问题,提出一个基于通信竞争的Join任务图的调度算法,该算法通过对各通信边的串行化而在任务调度中集成通信竞争,其时间复杂度为O(vlogv),其中v表示图中的任务数。实验结果表明,相比其他算法,该算法就调度长度、使用的处理机数、加速比和
某综合体商业楼地上主体结构3~5层,二层、三层平面大凹凸,四层中部开大洞,屋顶为钢桁架采光玻璃顶,下部楼层多处较大跨度平台端部不允许设墙柱,局部端头悬臂最大约15.1m。针
该工程为钢筋混凝土框架结构,主体为六层,该地区抗震设防烈度为7度,第二分组,场地类别为III类场地。夏季主导风向为东南风,冬季主导风向为西北风,基本风压0.45kN/m2,基本雪压
合成孔径雷达(SAR)图像由于相干成像方式产生斑点,严重干扰人们对图像的解译。所提系统总结了基于最小均方误差(MMSE)准则的SAR图像降斑算法,包括Lee滤波、Kuan滤波和Frost滤波,分析了它们在斑点抑制和边缘保持两方面的特性。仿真图像和真实SAR图像的降斑实验表明,Frost滤波算法同时考虑滑动窗内的统计特性和结构信息,因此优于其它滤波算法。
结合智能公共交通系统的应用现状,设计公交信息服务系统中的路网以及线网模型,并给出公交换乘的设计思路,最后以"基于GIS的浦东新区公交服务市民互动信息系统"为应用实例,详细阐述了公交信息服务系统的设计方案。
<正>1 概况龙岗协和制品厂位于深圳市龙岗镇,该厂生产车间主要为电镀工艺,其种类有以下几种:镀锌(酸性镀锌和碱性镀锌)、镀铬、镀仿金(镀黄铜)、镀镍、镀铜。工序生产时排出
会议