基于迁移学习的医学图像分割多任务算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:highbird51426
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
医学图像分割是定量病例评估、计算机辅助检测和疾病进展检测的重要环节,在医学图像处理领域起着关键的作用。目前,深度学习技术促进了医学图像处理领域蓬勃发展,大量的方法倾向于利用深度神经网络来解决各种医学分割任务。高精度医学图像分割的主要挑战来自于医学图像任务的固有难题:待分割区域的边界分割难度大与训练数据集匮乏。为了解决医学图像待分割区域边界的分割难度大的问题,提出联合边缘检测与图像分割的多任务学习策略。为了解决医学图像数据匮乏的问题,提出利用迁移学习策略将自然图像数据中的知识迁移至医学图像分割任务中。因此,本文依据医学图像的特点探讨了基于迁移学习的医学图像分割多任务算法问题,工作主要如下:一、研究了联合边缘检测与图像分割的多任务学习策略。边缘检测与图像分割是两种不尽相同但又相互联系的视觉任务,它们之间存在逻辑上的关联性,即边缘检测任务可以被理解为图像分割任务的子集。可以利用多任务学习策略将这两个任务结合起来,实现一个端到端的边缘检测-图像分割联合网络,以解决待分割区域的边界分割难度大这一问题。本文设计了一个选择性交并集成模块,通过将分割信息与边缘信息深度融合,最终生成高精度的分割结果图。在此基础上,为了更充分地利用医学图像的病理性特点,本文根据医学图像中分割难度从病灶(器官)中心至边界呈逐渐增大这一趋势,设计了中心权重解耦机制,将真值解耦为细节边缘标签与分割标签对网络进行多监督;同时本文还提出了一种新颖的交叉融合机制,对网络中的双流信息,即细节边缘信息与分割信息,进行深层次的融合。实验证明,相比于此前的单任务学习策略,联合边缘检测与图像分割的多任务学习策略可以大幅提高分割算法的精度。二、研究基于关系的迁移学习策略。由于常见的公开的医学图像数据集规模偏小,对比方法较少,很难在非常公平的条件下展现本文分割算法的有效性。为此我们使用了基于关系的迁移学习策略,首先在规模更大的自然图像数据集进行分割算法的比较,之后将相关经验迁移应用至医学图像。实验证明,本文方法无论是在自然图像分割还是医学图像分割任务中均大幅领先此前方法,证明了此策略的优势。三、研究基于参数的迁移学习策略。由于医学训练数据集匮乏,很难解决深度神经网络的数据饥饿问题,为此本文还采用了基于参数的迁移学习策略。本文首先选择了 Swin Transformer这一骨干网络,并在超大规模的自然图像数据集ImageNet上进行预训练,之后将这部分权重加载在医疗图像数据集上通过端到端联合学习对整个网络进行微调。从而可以利用其大量训练数据的优势,大幅提高了医学图像分割的精度。实验表明,基于迁移学习的医学图像分割多任务算法在息肉分割与视盘分割任务的四个数据集上均取得了优异的结果,在Dice、IoU等指标上领先于其他先进的模型,证明了本文方法的有效性。
其他文献
在新课改的持续推进下,小学数学的教学模式也发生了改变,逐渐以培养学生核心素养作为教学重点内容。教学期间,除了让学生掌握必备的基础知识之外,也要锻炼其解决问题能力与逻辑思维能力等。由于小学阶段的学生大多活泼好动,无法长时间高度集中注意力,这就要求教师必须立足于课堂实际,采用游戏化教学方法活跃课堂氛围,创设教学情境,使数学课堂变得更加有趣,符合学生心理发展特点。基于此,本文将重点探讨学科核心素养导向下
期刊
近年来,深度强化学习技术在围棋、麻将、星际争霸等复杂游戏任务上取得了成功应用。进一步地,研究者开始探索运用强化学习算法来解决更为复杂的决策问题,如机器人控制、交通信号控制、电力调度等。然而,由于现实任务更具多样性和复杂性,基于单一智能体建模的强化学习方法往往面临着难以求解最优策略的问题。一种有效的解决方案是将整个决策控制器抽象为具有不同功能的实体,从而将原始问题转换为多智能体系统问题。但在转换为多
学位
在经济全球化和第三部门蓬勃发展的背景下,组织中人员构成日趋多元且流动频繁,群体公民行为对于保障混合型组织有效运作和绩效提升效果显著。作为公益至上和坚持营利的混合型第三部门组织,社会企业的研究涉及到公共服务供给与三次分配,是公共管理的重要领域。社会企业本身的公益属性使其相较于政府部门与商业企业需要组织内部具备更高的群体公民行为,但兼具市场和公益的双元价值导向使得社会企业内部形成了清晰的群体断层,在组
学位
<正>近年来,驻司法部纪检监察组与驻在单位(司法部、中国法学会)党组坚决贯彻党的自我革命战略部署和全面从严治党战略方针,贯通落实“两个责任”,同题共答、同频共振、同向发力,推动全面从严治党、党风廉政建设和反腐败斗争向纵深发展。深入学习贯彻习近平总书记关于党风廉政建设、廉洁文化建设的系列重要论述,学习贯彻党中央《关于加强新时代廉洁文化建设的意见》,召开党组会议专门研究制定《实施方案》,把加强廉洁文化
期刊
冻土是一种对温度敏感、性质很不稳定的土体,在多年冻土区进行工程建设会对冻土温度场产生影响,进而影响冻土地基的承载力,威胁到工程的正常运行,因此如何采取有效的保护措施和路基形式以保护下伏冻土,使冻土内部维持热平衡,已成为国内外的研究热点问题。在总结前人沿用的各类冻土保护措施的基础上,研究分析了一种新的主动冷却路基结构——含水调控层路基,即在寒区路基一定深度范围内埋置一定厚度的含水调控层,根据不同季节
学位
在众多桥墩类型中,排架墩因其独特的结构形式,在公路与铁路桥梁中有着广泛的应用,但是同时也是由于它的结构形式,使得横桥向抗震设计显得较为复杂繁琐。排架墩在纵桥向抗震分析时,轴力几乎不受影响,但是在横桥向抗震分析时,轴力会随着横向力的改变而改变,目前我国对于排架墩横桥向抗震设计通常采用Pushover推倒分析,但是这是一个复杂且繁琐的过程,因此需要找到一个简化方法来尽量简化这一过程。另外,防屈曲支撑作
学位
情感分析是自然语言处理(NLP)领域的一个十分基础并且非常重要研究课题,早期的情感分析主要研究对象是文本数据,从文本数据中挖掘出蕴含的情感极性信息。随着互联网与社交媒体的不断发展,越来越多的人使用包含文本、语音、图像在内的多模态数据在社交媒体上表达自己的看法或观点,目前情感识别的研究范围不再局限于文本,越来越多的研究开始关注对融合了文本、语音、图像的多模态数据进行情感分析。如何更好的从多模态数据中
学位
报纸
活性炭作为氰化提金工艺的吸附剂,在循环使用中被污染、堵塞,吸附能力下降,需定期再生。目前,热再生工艺存在能耗高、炭损大、时间长的问题,需进一步优化。同时,考虑到活性炭与水具有良好的吸波性,可采取微波辐照整体加热含水活性炭达到600℃以上以完成再生,无需完全蒸干水份,相较热再生更节能。本论文主要研究了常规加热再生与微波再生工艺参数对载金活性炭再生活性、比能耗和炭损的影响,在此基础上对两种再生方式的工
学位
科技作为全面建设社会主义现代化国家的基础性和战略性支撑,对提升国家创新体系的效能,健全新型举国体制具有至关重要的作用。而随着科技创新驱动发展战略的不断深入,以智能化为核心的新型基础设施为世界的发展带来的是无处不在的“数据”“智能”和“链接”,同时我国海量数据用户所构成的大洲级市场和相关数据价值,为中国新技术的深度创新与融合创造了条件,也为塑造一批能准确把握未来科技变革方向、主导全球行业技术发展和深
学位