基于深度学习和域自适应的图像语义分割

来源 :电子科技大学 | 被引量 : 1次 | 上传用户:scube135
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像理解是人类智慧的核心部分,也是人工智能的重要组成部分。近年来,深度学习的巨大进步带来了图像理解的重大突破,例如图像分割、图像分类、物体探测。其中图像分割又可以细分为图像语义分割、图像实例分割和图像全景分割。在图像语义分割中,图像中的每一个像素都被分类为一个语义类别。在图像实例分割中则只关注图像中的可计数实例,例如行人和车辆。而图像全景分割则是前两者的结合,图像中的所有内容均被分割并区分实例。图像分割是许多计算机视觉任务的基础,自动驾驶、医学图像诊断、城市规划都需要高效准确的图像分割进行辅助。作为一个重要的研究方向,图像分割所面临的挑战是巨大的。本文关注的是图像语义分割这一基础同时又极具挑战性的计算机视觉任务。图像语义分割可以分为有监督分割和无监督分割两种,其中有监督分割指训练过程中有与图像对应的标注分割图可用于判断分割结果,而无监督则是没有对应的标注分割图介入训练过程。本文解决的是无监督图像语义分割问题。相较于有监督分割,无监督的图像分割更有实际意义。因为现实场景中通常不具有对应的标注图像,因此无监督图像分割技术被看作是图像分割在现实场景中应用的关键。数据的缺乏极大的限制了模型的性能,为了解决这一问题,借助生成图像来训练模型的无监督图像分割方法被提出。但是直接将在生成数据上训练的神经网络模型应用到实际场景中会导致严重的性能下降,这一现象被称为“域转移”。为了克服“域转移”导致的性能下降,本文提出了以下不同的方法来解决该问题:(1)我们提出了一个创新的生成对抗网络来进行无监督的图片风格迁移,在图像层级对图片进行风格迁移使图片在外观上趋于一致,这对域转移具有重大意义。(2)利用对抗的思想让网络输出的分割特征无法被判别器判别,以此达到域转移的目的。我们使用两个生成对抗网络从图像和特征两个层级来缩小两个域之间的差异。(3)我们深入分析出现“域转移”现象的根源并提出了多样性学习方法。多样性学习方法通过在多种图像风格的数据上训练使模型摆脱了对图像纹理的倾向性,更多地利用形状来分割使得模型在面对“域转移”时更加健壮。大量的实验表明,我们的方法在常见数据集上达到了当前的最优效果。
其他文献
厦门海域地处九龙江的入海口,背靠漳州平原和泉州平原,由于其优良的地理环境和重要的地理位置,使厦门海域成为我国重要的临海水域。厦门海域内环境复杂,地势多变,湾内资源丰
利用改进的差异显示PCR(DDRT-PCR)技术从水稻细胞中分离与缺铁胁迫相关的新基因.在分离到的8个差异片段中,通过Northern杂交验证,其中5个为阳性.在这5个阳性片段中有3个是受
现代小学数学教学的目标是培养能力、启发智慧,其核心目标就是培养小学生的思维能力。新课程改革下,小学数学教学以发展学生的数学思维为重点,这是小学数学教师的职责所在,也
自20世纪计算机在我国普及应用以来,开启了无纸化办公的崭新时代。依托于计算机办公相关应用软件,计算机才得以在工作领域得到广泛使用。随着计算机相关应用软件的发展,计算
从开封北郊的麦田土壤中分离筛选出11株对小麦全蚀病菌(Gaeumannomyces graminis var.tritici)有拮抗作用的细菌,通过对它们进行生理生化检验,确定为4个种,即:巨大芽孢杆菌(Bacil
近年来,知识产权特别是版权行业备受关注,我国版权市场初具规模。但是由于版权本身无形资产的特殊属性,一些拥有版权的企业尤其是中小企业筹资融资面临着很大的困难,这也在一定程度上阻碍了行业的发展。资产证券化作为一种较为有效的融资方式,其凭借创新的交易架构、现代化的风险管理机制等优势,将会成为解决版权行业融资困难的主要方式之一。通过比较分析国内外版权资产证券化的现状,发现相较于一些发达国家如美国和日本,由
近年来,基于眼底图像的病变及生理结构的识别被广泛研究和应用,这对于预防和及时诊断白内障、青光眼等一类的致盲性眼科疾病具有重要的意义和作用。但是由于患眼科疾病的病人
m以菜鸟驿站配送终端为例, 分析其存在的配送问题, 建立整数规划模型, 选择运筹学中的单纯形法为基础, 利用MATLAB软件对配送终端企业在人员安排上进行优化. 采用最短路径Dij
低云与大雾天气是影响航空器安全起降的主要灾害性天气之一。2016-09-30T06:26—2016-09-30T06:50浦东机场发生了一次大雾过程,能见度最低500 m,同时出现了最低云高60 m的低云
吸波材料是用于吸收电磁辐射能量且具有重要应用价值的一类材料。通常吸波材料可根据其制造技术分成两类:一类指的是通过涂敷具有吸波特性的材料构成涂敷型吸波材料,另一类指除了具备吸波能力,还能够起到承载功能的材料,称之为结构型吸波材料。本文主要基于遗传算法(Genetic Algorithm,GA)对涂敷型吸波材料的电磁参数以及吸波蜂窝的结构参数进行了优化设计;基于深度卷积神经网络(Convolution