基于人类视觉感知的合成图像质量评价方法研究

来源 :江西财经大学 | 被引量 : 0次 | 上传用户:zhangruidao11
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来随着科学技术和多媒体技术的快速发展,越来越多的新技术应用到现实生活中。从黑白图像到彩色图像,再从二维图像到三维图像,整个过程都展现了多媒体技术的快速发展。在多媒体技术中,值得一提的是3D技术,例如:虚拟现实、三维电视、自由视点电视等。3D技术可以更好的满足人类对视觉体验的要求,更好地模拟人类的视觉感知,但是这些技术的研究需要人们获取更多的图像,而图像的获取需要很大的人力、物力和财力。因此,基于深度信息的图像渲染技术油然而生,该技术的主要目标是减少图像的获取量、图像的存储量和图像的运输量。但该技术无法避免的缺点是在人类获取图像、存储图像、显示图像以及图像渲染生成过程中,会使得图像的质量降低,从而降低人的视觉体验。因此,对降质图像的质量评价显得尤为重要。由于图像的产生和发展的需求对象是人类,人是图像显示的“感受物”。因而,如果利用人眼直接对图像质量进行评分,那么评分的结果是非常准确的,这种方法称为主观图像质量评价。但是,主观质量评价耗费人力、物力和财力。所以,人们希望能够通过计算机算法模拟人眼对图像的质量进行间接评分,这种方法称为客观图像质量评价,该方法全程不需要人的参与。本文将介绍一种无参考的合成图像质量评价算法和一种全参考的合成图像质量评价算法。由于人是图像显示的“感受物”,所以本文中的两种图像质量评价方法以人类视觉感知特性为基础设计,通过提取图像视觉感知特征,设计简单、有效的客观图像质量评价算法。本文具体研究内容包含以下两个方面:(1)在无参考合成图像质量评价的设计中,我们考虑了合成图像的颜色信息和空洞信息。由于人眼在观察图像时,对彩色信息比较敏感,所以在设计算法时,我们提取了彩色信息,彩色信息用饱和度和色调特征来表示。特别地,我们使用局部二值模式(Local Binary Pattern,LBP)方法计算饱和度映射图和色调映射图的一阶导数图,并从得到的两种LBP映射图中提取了纹理特征向量。此外,根据人类视觉系统(Human Visual System,HVS)的特点和合成图像特异性的失真类型,本方法提取合成图像的空洞区域图作为LBP映射图的加权图。最后,采用支持向量回归(Support Vector Regression,SVR)模型对提取到的全部特征向量进行训练,拟合得到一个回归函数,然后根据函数预测每个测试图像的视觉质量分数。本文提出的方法同现有的8种最先进的自然图像和合成图像无参考质量评价算法进行了比较,我们的算法在IRCCyN/IVC DIBR数据库和MCL-3D数据库上的性能都得到了明显的改善。(2)随着自由视点电视(Free-viewpoint TV,FTV)技术的迅速发展,基于深度图像的渲染(Depth-image-based Rending DIBR)技术在“虚拟”视点图像合成中得到了广泛的应用。但是,“虚拟”合成图像中的失真类型与自然图像中的失真类型不同,例如:不连续性、闪烁和拉伸等。为了测量合成图像的畸变程度,本文提出了一种基于局部变化测量的全参考合成图像质量评价方法。首先,由于合成图像的畸变主要发生在图像的结构区域,因此,我们基于中性(Neutrosophic,NS)域提取了图像的结构映射图,基于此图可获得局部图像结构质量分数。其次,由于二维图像的扭曲或空洞区域信息的丢失,使得虚拟合成的图像的纹理可能受到破坏,因此,我们基于频域提取了局部纹理特征,并计算得到局部纹理质量分数。然后,针对合成图像中所特有的拉伸失真,我们采用信息熵的方法计算拉伸区域的视觉质量分数。最后,我们利用池化操作融合三个模块的视觉质量分数来获得最终的预测质量分数。实验结果表明,本算法的性能优于现有的全参考和无参考图像质量评价方法。
其他文献
随着智能移动设备的海量接入和新兴无线通信业务的加速普及,移动数据流量呈爆炸型增长,用户对数据速率要求愈来愈高,5G的关键技术D2D(Device-to-Device)通信技术与中继协作技术应运而生。基于D2D通信技术与中继协作技术的优势,本文主要分析研究了异构网络中以及将中继协作技术引入异构网络带来的复杂同频干扰、频谱资源分配、中继选择和能量消耗问题。主要研究工作概括如下:1.针对由蜂窝用户和D2
我国农业发展已由传统农业步入现代农业发展轨道,苹果产业由劳动密集型向资本密集型转变,黄土高原区与环渤海地区也迫切需要转变栽培模式与推动产业升级。随着我国现代化进程
在传统的国际投资仲裁饱受争议的前提下,欧盟在2015年9月的TTIP谈判中提出了一个以初审法院和上诉法院构成的投资法庭机制(ICS)来代替临时投资仲裁制度。目前该机制的相关制度设计已经在TTIP、CETA和EVFTA文本中逐步完善。在中欧BIT谈判中,中国应否接受欧盟提出的ICS机制,中国对该机制的适用能作出哪些更适合中国现状的努力,成为目前关注的焦点。在分析ICS现状的基础上,对ICS改革中的中
本文对新型钙钛矿纳米晶材料的光伏性质进行了深入研究,并通过界面调控和器件结构优化有效提升了基于钙钛矿纳米晶材料太阳能电池的效率和稳定性。主要研究工作总结如下:首先
粗木质残体是森林生态系统碳库的重要组成部分,其碳储量占森林土壤表层总碳库的3-6%。粗木质残体分解导致的碳排放量占整个森林生态系统碳排放的将近10%。因此,粗木质残体分解在森林生态系统的碳循环中发挥着重要的作用。近年来气候变化背景下降水格局的改变严重影响了森林生态系统的碳循环,然而目前关于干旱对森林粗木质残体分解的影响及其调控机制的研究尚不深入。本研究以亚热带常绿阔叶林典型的优势树种为研究对象,选
在过去的十几年间,随着城镇化发展的需要,大开发大建设的范围不断扩大,城郊的土地被大量征用。为了推进区域发展,征地动迁后大量农民动迁后被安置到各类小区,农民变成居民,产
钢结构因具有自重轻、强度高、抗震性能好、建筑造型美观、施工周期短、功能空间布置灵活、绿色环保可回收等优点而得到广泛推广。但地基不均匀沉降、地震等都会对钢结构造成
随着“中国制造2025”规划的不断推进,机器人产业对并联机器人的需求不断向高速度、高精度、智能化等方向发展,少自由度并联机器人以结构紧凑、经济便宜、控制相对简单而得到
转基因水稻所表达的Bt(Bacillus thuringiensis)蛋白对靶标害虫表现出高度抗性的同时,其对非靶标生物的安全性也受到公众的广泛关注。在稻田生态系统中,转Bt基因水稻所表达的
目的:采用系统评价和Meta分析的方法,评价手术优先治疗模式(surgery-first approach,SFA)和传统三阶段正畸-正颌联合治疗模式(conventional three-stage method,CTM)治疗骨性Ⅲ类错(牙合)畸形的术后硬组织稳定性以及患者治疗前后生存质量差异,为骨性Ⅲ类错(牙合)畸形的治疗提供循证医学证据。方法:全面检索中国知网全文数据库、万方数据库、维普期刊