基于深度学习的压缩人脸图像复原算法

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:liuzengyong1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
有损压缩图像的复原一直是图像处理领域备受关注的话题,多年来针对压缩图像复原的研究也取得了显著的效果。但大多数压缩图像复原算法都是针对自然图像,并没有特别考虑人脸图像结构的特殊性,故对压缩人脸图像的复原效果并不理想。针对此问题,本文结合人脸组件先验信息,提出基于深度学习的压缩人脸图像复原算法,主要研究成果如下:1.基于面部结构残差网络的压缩人脸图像复原方法。由于域的特定属性,使用通用的压缩图像复原算法进行压缩人脸图像复原,往往会使复原出的人脸图像在面部组件附近出现严重的模糊。为了获得面部组件部分更加清晰的复原图像,提出一种结合面部结构先验信息的深度残差网路。在训练阶段,首先训练一个用于初步复原人脸图像整体结构的预复原网络,但是不具有任何先验信息的预复原网络并不能很好地处理具有精细结构的面部组件。因此,该算法在预复原网络的基础上提取五种面部组件:眼睛,眉毛,鼻子,嘴巴和脸廓,分别训练用于复原面部组件的细节增强网络。在复原阶段,再结合由Landmark关键点检测结果生成的面部掩膜,对不同的人脸组件使用相应的网络参数进行精准的复原。实验结果表明,该方法相比其他复原算法不仅具有更高的客观评价指标,且复原结果在人脸组件处拥有更加清晰的纹理细节。2.基于生成对抗网络的压缩人脸图像复原方法。使用MSE准则优化的模型通常具有较高的信噪比,但生成的图像会趋于平滑,且视觉感知效果较差。加入感知损失有助于恢复图像的语义结构,生成具有优秀感知质量的图像。因此,本文提出使用感知损失函数优化生成对抗网络的方法用于压缩人脸图像的复原。但如果直接使用压缩图像进行生成对抗训练,则低质图像中原本的噪声可能会被生成器误识别为图像本身的细节而被放大。因此本文首先训练一个融合了面部组件结构的去噪模型,用来去除输入图像中多余的噪声;然后再使用生成对抗网络来生成人脸组件处的纹理和细节。实验结果表明,去噪模型取得了最佳的PSNR和SSIM;生成对抗网络模型则生成了纹理更加丰富的人脸图像,具有最佳感知质量。
其他文献
电报方程是一类描述物体内部震动和波的传播方式的双曲型偏微分方程,已被应用于许多多样化领域,例如热力学中的传热理论、电信号的传播、随机游走理论、核反应堆中的中子传输等.由于分数阶电报方程比整数阶导数更能有效地解释遗传性质和记忆性,近年来分数阶方程得到了许多学者的重视.本文针对一维时间分数阶电报方程提出了一种空间紧致有限差分方法,对二维时间分数阶电报方程提出了一种空间紧差分方法,紧致有限差分方法因其网
随着我国金融制度的不断发展与完善,股权质押凭借其在流动性、操作便利性等方面的优势,有效的将经济存量转化为流量,给我国企业,特别是上市企业的融资带来了新的途径,相应的融资行为也蓬勃发展。与此同时,股权质押的发展也产生了一些负面的影响。近年来,上市公司股价跌破其控股股东股权质押设定的补仓线导致上市公司控制权转移、控股股东通过股权质押“提前套现”、甚至控股股东在质押后“掏空”上市公司的案例屡见不鲜。伴随
拓扑态自提出以来,一直是物理学中重要的研究方向。在对量子自旋霍尔态的无序效应的研究中,科学家发们现了由无序引起的拓扑相变,称为拓扑安德森相变。并且这种相变过程可以
随着石油工业的发展和全球对石油需求量的加大,针对低孔、低渗致密砂岩油气藏的研究已成为油气工业的重点研究领域。本次论文研究的区域库车坳陷白垩系储层正是低孔、低渗致
近年来,国内贫瘠的铁矿石资源无法满足钢铁行业发展需求,进口的高铝铁矿石在国内烧结生产中比例逐步提高,烧结矿中Al2O3含量呈上升趋势,对烧结矿的冶金性能造成不利影响,而且
转炉脱磷一般分为双联法、双渣法、单渣法。本课题主要研究单渣法脱磷,在转炉溅渣流动氮气氛条件下,借助溅渣护炉过程气化脱除熔渣中磷元素,使用碳质还原剂还原熔渣,在高速氮
十八大以来,精准扶贫战略成为我国在新时期、新形势下的创新扶贫方式,改变了之前扶贫工作中存在的识别粗糙、帮扶不到位等深层次矛盾,脱贫攻坚的工作成效显著。党的群众路线是我党在革命、改革和新时代时期传承和发展下来的传家宝,在精准扶贫的工作实践中坚持认真贯彻党的群众路线,是新时代推进精准扶贫的新要求。因此,从党的群众路线角度切入,研究其在精准扶贫工作中的实践举措,总结新时代党的群众路线在精准扶贫工作实践中
在CAD中,构造整体曲线往往会存在冗余数据.实际上,在造型过程中不同段之间其控制顶点可能有着某种关系.为寻找这种关系,本文选择对C-Bézier曲线进行研究.此外,C-Bézier曲线的形状通常情况下由控制顶点调节.其几何形状表示为两种运动:曲线点轨迹绕椭圆中心转动,且椭圆轨道平面以Bézier曲线为中心移动.基于几何形状,可提出一种由几何特征来调节其形状的新方法.由此,本文从理论与应用角度,对C
伴随着社会的高速发展,基础设施的广泛建设,传统的财政投资已难以满足日渐高涨的社会需求。面对这一状况,我国政府大力推广新型融资机制—PPP模式。PPP模式不仅能减轻地方政府的财政投资,还能通过其高效率机制实现项目整体经济效益最优化的目的。但PPP项目的落地实施需要物有所值这一客观的评判标准,在项目初始阶段判断PPP模式是否适合该项目的建设过程。PPP项目VFM评价目前是我国PPP项目能否落地实施的核
在控制理论中,带有非局部项的偏微分系统的镇定问题是一类非常经典的问题,科研工作者们对此一直很感兴趣,此类问题在实际中有着越来越广泛的应用.本文将对给定的带有非局部项的偏微分系统做出研究,全文共分为四章.第一章我们介绍了带有非局部项的偏微分系统镇定问题的背景、国内外研究现状,并且给出了相关的预备知识.第二章我们首先考虑带有非局部项μu(x0,t)的传输方程的振动行为.对于在内部点的传输方程的边界状态