基于CNN的无参考立体图像质量评估算法的研究与实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:GOG12
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,伴随着多媒体技术的快速发展,图像信息在日常生活中使用的越加广泛。图像信息表达直观、丰富,而尤其以立体图像能给人以真实的临场感受,带来了新的诸多应用。但是在立体图像成像过程中的图像信息采集、压缩、传输、解码、显示过程中,如何合理又高效的对图像信息进行图像质量的评估,将对后期能否对图像进行行之有效的处理有极大的影响。以往通常使用利用人工对图像进行主观观测的方式来获得图像的质量评价,但是这样做在耗费大量人力及时间的基础上,将极大程度上影响多媒体系统的效率。在使用计算机技术评估方面,由于立体图像自身结构特点,当前诸多算法仍存在应用环境不广,评测效率低下等缺点。因此,当前迫切的需要一种不用依靠人工,能够自动且高效的评估手段,对立体图像质量进行评估。随着机器学习的快速发展,近十年来以卷积神经网络为主的深度学习技术在物体识别、图像理解等方面取得了突破性的进展。包括卷积神经网络在内的深度学习模型,能通过对海量数据深度挖掘,提取数据深层特征信息,以自学习的方式对目标进行求解,有效解决相关问题。因此,本文提出使用卷积神经网络,利用平面图像、立体图像中的视图信息和差分信息,构建一类无参考立体图像质量评估算法。本文具体工作及创新点如下:1、利用卷积网络能高效处理图像信息的优势,使用卷积神经网络处理立体图像质量评估问题,深度挖掘立体图像空间信息,将特征学习和目标训练结合为一个有机的整体,并利用卷积神经网络自学习能力,在不借助原始图像基础上,构建无参考的评价方式,避免了算法使用的局限性,大大提升了算法的应用场景。2、针对立体图像结构特点,构造三组数据来源不同的卷积神经网络模型,从不同角度挖掘图像深层信息与主观质量映射关系。充分利用多通道效应、立体感知等模仿人眼视觉特性。分析来自立体图像中的视图信息和差分信息,有效学习图像中的空间结构,将各类信息进行多通道回归分析,拟合于图像主观质量分数。3、基于多组卷积神经网络的研究,考察对于立体图像数据库不充足缺陷的解决办法。通过对立体图像中差分信息和视图信息的处理,利用两者间的结构相似性,使用迁移学习将平面图像信息应用与立体图像质量评估算法中,以此在扩充数据库的前提下,提升网络学习的能力及泛化能力。本文通过使用LIVE 2D、LIVE 3D、IVC图像数据库中相关图像对本文所提出的模型进行验证,最终得到本模型在同数据库和跨数据库训练环境下,模型评价效果与主观评价模型有很高的一致性,且评估水平超过了各大主流评估算法。因此,本文克服了传统方法浪费人力、应用场景不足的缺点,为进一步对立体图像质量进行评估有一定的参考价值和实践意义。
其他文献
多金属氧酸盐是一类结构确定的纳米尺度无机簇合物材料。该类化合物具有很多特殊的物理化学性质,因而被广泛应用于催化、腐蚀保护和光电化学中,并且在能量转换、显示器件和高
高中地理学科不同于语文,学生可以自主学习,地理有许多复杂难懂的知识,需要教师引导学生学习,所以在新课改背景下要求高中地理教师提高课堂教学有效性.如何提高高中地理课堂
高中化学知识系统复杂,是很多学生偏科的对象,如何提高学生化学成绩,如何培养学生兴趣是每一位教师都格外关心的问题,针对这一现象,化学实验的合理安排将帮助学生实现学习的
语文是初中课程的三大主科之一,在中考中有着举足轻重的地位.什么是语文?“语”是指用口头表达的语言,“文”是指用书面表达的语言.“语”和“文”有机的结合起来,才能更好地
在教学课堂上,究竟是教师占主导地位?还是学生占主导地位?这成为了现在社会上大家讨论的话题之一.对于家长来说,希望教师在课堂上占主导地位,把知识讲解的更加透彻和详细,让
国家为了提高学生的综合素质,为了给社会提供优秀的人才,将学习计算机作为一门学科加入中职教学中.近年来,中职计算机教学越来越受到重视,中职教师为了提高教学质量,为了让学