基于深度生成模型的人脸图像修复算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:Xiongbaobao520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像修复是计算机视觉领域中的一项研究热点和难点。传统的图像修复方法大多是基于图像结构纹理一致性,在面对大面积语义缺失的破损人脸图像时往往无法取得令人满意的修复结果。随着深度学习的快速发展,基于深度生成模型的图像修复方法可以直接生成缺失的部分图像,极大的改善了图像修复的效果,然而深度生成模型仍然存在很大的提升空间,网络结构单一、训练过程不稳定、参数选择困难对基于深度生成模型的图像修复算法具有很大的挑战性。本文介绍了基于生成式对抗网络的图像修复算法,对基于DCGAN的人脸图像修复方法进行了改进,提出了一种基于LSGAN改进的人脸图像修复算法。该算法使用LSGAN模型作为图像修复中的生成网络,解决了传统生成式对抗网络生成图像质量不高和训练过程不稳定这两个缺陷。同时,对网络结构和训练过程进行一定的改进,提高了网络生成图像的质量。然后利用语义损失和感知损失找到用来填充破损图像的最佳生成图像,利用生成图像相应位置的像素填充破损图像。基于公开的人脸图像数据集,通过主观评价指标和客观评价指标,可以验证改进后的算法在不同类型的破损图像上均具有更强的修复能力。本文在基于深度学习的生成式模型的基础上,提出了一种结合变分自编码器和生成式对抗网络改进的人脸图像修复算法,将生成式对抗网络中的判别器融入变分自编码器的网络结构中,使用局部判别器和全局判别器两个判别器共同进行训练,利用判别损失强化生成器生成图像的效果。同时对变分自编码器进行了一定的改进,引入特征损失作为编码器的损失函数,提高生成网络的训练效率。利用该算法修复破损图像时,直接将待修复图像输入网络中,经过编码和解码生成与原图非常近似的生成图像,将生成图像相应位置的像素对破损图像进行填充,最后利用泊松融合对修复的结果进行微调完成修复。基于公开的人脸图像数据集,该算法实现了大面积破损的面部图像的修复任务,并且通过主观评价和客观评价,证明了该方法对不同场景中破损图像均具有很强的修复能力。
其他文献
<正>中国绿发会提起首例保护濒危植物公益诉讼针对实施雅砻江水电梯级开发计划可能破坏濒危野生植物五小叶槭生存的情况,9月17日,中国生物多样性保护与绿色发展基金会向四川
事业单位主要是为经济社会发展提供公益服务的社会组织,事业单位在科研、服务等方面通过发挥专业技术能力优势和服务内容优势实现事业单位在经济社会发展中的价值。事业单位
临近“双十一”,关于“二选一”的话题不断见诸媒体。近年来,随着电商领域竞争白热化,平台要求商家在自己与竞争对手之间“二选一”的乱象愈演愈烈。$$前不久,阿里巴巴集团市场公
报纸
用89S51单片机实现模拟信号和数字信号之间的相互转换,并在保持信号不失真的前提下尽量提高转换速度
各位委员:$$我代表政协第十二届广东省委员会常务委员会,向大会报告工作,请予审议,并请列席会议的同志提出意见。$$一、2019年工作回顾$$2019年,是人民政协历史上意义非凡的一年。
报纸
主要组织相容性复合体二类(MHC Ⅱ)分子在人体免疫系统中扮演着核心角色。通过将与之绑定的亲和肽呈递给助手T细胞,MHC Ⅱ分子能够激活人体对疾病的免疫反应。因此,准确预测M
双塔连体结构是两个高层建筑由设置在一定高度处的架空连廊相连而组成的复杂高层建筑结构。双塔连体结构塔楼刚度大,而连接体部分受力复杂。连接体部分要协调两侧塔楼结构的
<正>迟福林主编中国经济出版社2015年2月作者认为转型出路在于加快走向服务业大国,到2020年基本形成服务业主导的经济结构,通过创新公共财政制度、优化税制改革等措施,推进服
中国建立碳交易市场既是应对国际减排压力的要求,更是推进绿色转型发展的必然选择。我国建立碳交易市场需要借鉴国际经验,参照国内其他市场建设的经验,利用经济转型的历史机遇,以
报纸
这篇文章中,我们将介绍MPOF的导光原理,及几个主要课题在近期取得的进展,例如液体填充光纤、空心光纤、互联应用、有机掺杂及其在传感技术中的应用等。