结合场景深度估计的场景拓扑结构研究

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:yayanorman
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单目图像场景深度结构研究一直是当前计算机视觉任务中重要的组成部分,该任务关注于如何从单目图像中获取与之相对应的场景深度结构。在Marr奠定的计算机视觉理论中,一直将其作为人类视觉的重要任务。场景深度结构一般指的是同一场景中的不同物体在同一个观测设备下形成的三维空间中的拓扑结构关系,在单目图像中这种关系会反映为二维平面关系,如何从单目图像中获取对应目标的前后排序关系是场景深度拓扑结构最终所要解决的问题。在当前单目图像深度场景深度排序任务中依然存在着几大挑战:(1)物体分布杂乱的复杂场景中获取深度线索存在困难,杂乱无章的物体以及目标的悬浮情况直接影响了消失点的检测,导致深度线索缺失;(2)遮挡作为恢复目标区域深度关系的重要线索而存在,但是在某些复杂场景中,经常出现部分物体之间无直接遮挡关系的情况,甚至有些遮挡关系与现实场景中的实际情况出现冲突。针对这些问题本文开展了以下工作:(1)本课题整理了目前深度特征获取和分析的研究现状,从场景深度估计的关键步骤、公开数据集和评价标准等方面进行了充分地阐述。课题交代场景深度信息所采用的表征方法,并从非深度网络,深度网络和图模型三个方面交代了现有方法的基本理论,为场景深度估计和拓扑结构研究奠定了理论基础。(2)针对目标场景中消失点检测导致线索缺失的问题,本课题研究并采用像素级深度估计取代对应的消失点线索,并构建了一个基于多尺度空洞卷积的U型网络。该模型在编码阶段不丢失分辨率的情况下实现扩大感受野的功能,同时加入多尺度级联操作来避免信息冗余的发生。为兼顾不同尺度物体的深度估计,模型采用采样跨层汇集,传递相同尺度的场景特征信息,有效提高了模型收敛精度。我们在公认的场景深度排序NYU-Depth-V2数据集上实验证明了本文方法的优势。(3)针对遮挡判定失效或与遮挡关系发生冲突的问题对深度排序结果造成的影响,本课题提出使用将区域遮挡结果作为局部深度线索,并结合作为全局深度线索的深度估计信息,获取最终的深度排序结果。为有效整合局部深度线索和全局深度线索,使用隐马尔科夫模型对两种线索进行整合,通过两种深度线索来构建图模型。该图模型基于EM算法的参数学习来获取相关模型参数以及推理,获得最终的深度排序结果。在公认的场景深度排序NYU-Depth-V2和Make3D数据集上实验证明,本文提出方法可以有效改善场景深度拓扑排序研究,并在相应的误差和精度上,优于当前场景深度排序的主流方法。
其他文献
本篇论文是一场现场口译实践报告。随着我国近年来改革开放取得突出成就,国民经济总量迅速成长,中国和世界的联系日益紧密,我国留学事业也发展迅猛,越来越多低龄学生加入到留学大军之中。口译活动也为更多中国学生家长选择学校时提供不可替代的作用。然而,由于中西双方民众缺乏对彼此学术以及学制背景知识和文化的了解,双方的沟通难免会产生词不达意的现象,这无疑加大了市场对于专业口译人才的需求。目前,无论国际或国内都不
高光谱图像起源于遥感技术,应用领域包括地质、生物、医学和军事等。高光谱图像为三维数据,由光谱信息和图像信息组成,具有数据量庞大且冗余、光谱波段多以及波段间相关性高
人体组织、器官的衰竭与缺失是当前发病率最高、最具威胁性且治疗费用最为高昂的医疗难题,由于供源不足、免疫排斥、异物反应等诸多因素,组织器官移植无法根本解决该问题。组
“五四”是中国社会一场深刻的思想启蒙运动。五四时期,在“人的觉醒”和“个性解放”的同时,知识分子普遍陷于精神苦闷之中。封建专制制度对于人性的束缚和戕害,帝国主义、
随着我国金融体系变革,影子银行规模快速扩张,其监管套利、期限错配、资金空转等特征会导致巨大的金融风险,影子银行的周期性行为已经对我国金融安全产生了负面的影响。加强影子银行监管受到国际社会的广泛认可也是我国金融发展需要关注的重点。本文以影子银行业务规模位居同类银行之首的兴业银行为例,研究商业银行影子银行业务规模周期性及风险偏好。为我国影子银行业务监管提供建议。本文概述了我国影子银行业务的发展、成因、
近些年来,人脸表情识别作为情感计算的分支吸引了国内外研究者的目光。目前,传统表情识别工作主要关注于特征提取,然而部分手工提取的特征由于鲁棒性低、表征能力弱等缺点无
现阶段是信息化的时代,也是科技化的时代。随着云计算、大数据、人工智能等诸多领域的快速发展,神经网络语言模型也在跟随时代前进的脚步,在语音识别、光学识别技术、自然语
提及家庭暴力的话题,社会大众的印象一般是以两性婚姻暴力为代表的成年人间的家庭暴力,而对未成年人遭遇家庭暴力的关注却相去甚远,甚至认为是一种教育行为。相比于两性婚姻
开明派是一个同人聚合较为松散的文学文化文人集合。开明派同人因具有相同的文化志趣和社会理想于20世纪20年代初聚集在一起,主要成员有经亨颐、匡互生、夏丏尊、朱自清、丰
自人工智能概念出现至今,人类从未停下对机器博弈探索的脚步。机器博弈依据其对于博弈局面信息了解的程度,可分为完备信息博弈和非完备信息博弈。如围棋,国际象棋这类博弈竞