基于结构上下文和多任务学习的电子显微镜图像分割方法研究

来源 :华侨大学 | 被引量 : 0次 | 上传用户:ztwpc2008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
连接组学(Connectomics)旨在理解大脑如何工作,是神经科学研究的一个重要方向,其核心工作是刻画神经系统连接方式的完整图谱.随着成像技术的发展,电子显微镜(Electron Microscopy,EM)可以在纳米级分辨率对三维组织成像并生成海量图像数据.自动解译大规模EM数据中的一个核心问题是图像的高精度自动语义分割.例如,细胞内的微观细胞器结构如线粒体的形态和分布异常与神经退行性疾病密切相关.线粒体的空间分布和形态定量作统计分析对连接组和神经科学研究至关重要.本文面向大规模纳米级EM图像分析任务,系统研究了EM图像精准语义分割面临的挑战及其解决方法.EM图像内容复杂、结构丰富,细胞器属形状不规则、分布不均匀的小目标,其灰度、纹理、尺度等变化较大,并且与其它细胞组织和结构的灰度相似.因此,实现高精度分割的关键是,1)如何有效利用图像上下文信息,设计或学习具有高分辨能力的图像特征;2)如何实现一致性结构化标签预测以利用图像内的结构化信息;以及3)如何有效地从数据中学习并利用内蕴几何先验信息.除了模型分割性能,计算和模型复杂度也是计算机辅助生物医学研究中的重要考量.设计轻量级的高效模型可以便于模型部署和应用在更多设备环境中,从而增加模型的应用价值.针对上述问题,本文提出了一系列针对性的解决方法,主要创新点为:1.设计了一类新颖且极具区别性的刻画图像上下文信息的特征——局部图像块模式(Local Patch Pattern,LPP).该特征利用图像较大邻域内关于对象内和对象间交互的上下文信息以消除因局部表观特征和纹理特征所引起的歧义性.2.提出了一种新颖的基于迭代学习策略的层级结构化分割框架,并使用新颖的中值融合策略对较长迭代范围内的历史预测信息进行融合,实现了对空间和时间上下文进行编码以及抑制错误分割信息的目的.迭代过程中,对图像和历史预测概率图同时提取LPP特征,从而在图像层面以及包含多个历史预测信息的标签层面上产生了感受野不断增大且具有层级结构的结构化上下文特征,并采用结构化随机森林以利用图像空间结构信息来实现高精度地结构化预测.3.提出了一个新颖的轻量级层级多视角聚合分割框架.该框架以2D分割模型为基础分类器且能聚合多视角信息实现三维分割,在取得高精度分割的同时,实现了更少的计算开销和内存消耗,便于模型部署和应用在更多设备环境中.4.提出了一种基于中心线几何先验的多任务网络——蜂巢网络.该网络将线粒体中心线作为其内蕴的形状线索以规范化分割,取得了连续性高且假阳性少的分割结果.受益于多任务网络利用包含在多个相关任务中的有益信息提高整体泛化性能等因素,蜂巢网络在较少标注数据下依然具有优秀分割性能.5.提出了新颖的层级多视角聚合卷积模块,通过分解和共享三维图像多视角信息以提高模型整体学习能力.它使用多个2D卷积提取三维图像空间上下文信息,具有参数少、计算复杂度低等优势,是传统3D卷积的有效轻量级替代.结合该模块,蜂巢网络具有轻量级架构,有效解决了目前基于3D卷积网络对三维医学图像分割时受限于需要较大计算开销和显存消耗问题.
其他文献
化工领域在为我国经济发展做出巨大贡献的同时,化工产品的易燃、易爆等特点致使化工事故也在频繁发生,化工事故无论是对企业还是环境造成的破坏都是巨大的。化工数据专业性和
随着激光技术的发展,大功率激光器越来越受人们的重视。大功率激光器在工业、军事和核聚变等方面起着重要的作用,人们在提高大功率激光器系统的输出功率方面付出了巨大的努力
研究表明海豚等温血生物,可利用其表皮弹性、体表温度对液体介质主动控制实现减阻。基于上述生物耦合现象,课题组构建并制备了一种弹性与导热性能兼备的仿生功能表面,该表面
目的:人类表皮生长因子受体 2(human epithelial growth factor receptor-2,HER2)在正常组织中表达不显著,但在乳腺癌、宫颈癌和肺癌等恶性肿瘤中高度表达。目前,约20%的乳腺
星载空间可展开结构广泛应用于航空航天及军事领域,是一种新型的,具有良好发展前景的结构形式。锁紧机构是可展开结构的重要组成部分,其在保证星载空间可展开结构运载过程中
随着物联网、5G通讯、多路通讯技术时代的到来,人们对信号的传输速度和质量有了更高的需求,这就对微波介质陶瓷材料的需求更加迫切。尤其是低介电常数和高品质因数以及频率温
随着互联网的广泛应用,位置服务逐渐给人们的生活带来极大的便利,使得位置信息成为社会生活中一项不可或缺的基础信息。本文在“面向公众的米级位置服务系统关键技术及应用示
利用股票的市场价格的信号传递机制来实现资源的有效配置,是股票市场的重要功能,但股票的同涨同跌现象却损害了资本市场的信号作用,引起了资源的错配,同时也造成投资者的损失
连续相位调制(CPM,Continuous Phase Modulation)是一种高效的调制方式,它具有相位连续、带宽高效、包络恒定等优点,这些优点使其在远距离测控领域有很大优势。多调制指数连
部分荧光粉的发光效率和热稳定性较差,但是氮化技术可以有效的改善现有荧光粉的相关性能,荧光粉氮化后优异的性能主要体现在空间结构更加稳定,具备良好的热稳定性,发光性能也