基于完整空间表示的多角度人脸图像生成对抗网络研究与应用

来源 :南京师范大学 | 被引量 : 0次 | 上传用户:chaircat
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸图像作为人脸分析和识别过程中不可或缺的重要环节一直备受研究人员的关注。生成高精度、高逼真、多角度的人脸图像样本可以在一定程度上扩充人脸数据集,缓解模型训练中对训练数据量需求的问题。近年来,生成对抗网络的出现显著提高了人脸图像生成的真实性与多样性,在多角度人脸生成任务中取得较好的结果。但研究表明从低维的隐空间进行随机采样生成人脸图像的过程中,对于训练数据集未覆盖的映射空间采样生成的结果很难令人满意,即模型学习到数据的隐空间表示是不完整的。在借鉴完整空间表示学习的基础上,本文提出了基于完整空间表示的改进生成对抗网络模型(Improved CR-GAN,ICR-GAN)和基于谱归一化的ICR-GAN模型,上述模型采用了学习真实数据完整隐空间表示的双通道结构,保证模型对隐空间的学习是完整的、不完全局限于训练数据集的。以上述模型为基础,本文还设计实现了多角度人脸图像生成系统,并在人脸匹配问题中进行了应用。本文的具体研究工作如下:首先,提出基于完整空间表示的改进生成对抗网络模型(Improved CR-GAN,ICRGAN)。该模型挖掘了CR-GAN模型的双通道结构,充分发挥不同通道对由编码器E-解码器G组成的生成器在提升生成图像效果的指导作用。在重构真实样本的多角度人脸图像方面,ICR-GAN模型添加了约束保证生成图像是对输入样本的真实重构,指导重构路径上生成器能生成逼真的、较好保留对象身份特征的多角度人脸图像;生成路径上判别器D的目标函数中添加判别相同对象样本的判别得分相近约束,保证判别器D在判别真实性时充分考虑人脸特征分析。实验结果表明,ICR-GAN模型改进了判别器D对于相同对象的样本判别得分,同时模型在生成随机图像和生成多角度人脸图像时相比CR-GAN取得了更好的结果。其次,提出了基于谱归一化的ICR-GAN模型(Improved CR-GAN with Spectral Normalization,ICR-GAN-SN)。该模型针对CR-GAN和ICR-GAN模型在模型训练过程中生成器出现的生成图像质量波动不稳定的问题,分析了判别器的目标函数中用以满足1-Lipschitz条件的方式,放弃使用原先的梯度惩罚项,改对双通道上两个判别器D都施加谱归一化约束,限制判别器D中的神经网络层参数的变化。实验结果证明,ICR-GAN-SN模型中判别器D与编码器G的目标函数波动幅度下降,两个网络的收敛速度明显加快,模型的训练过程更加稳定,提高了对单张人脸图像的多角度人脸的生成效果。最终,设计实现了多角度人脸图像生成系统。该系统主要包括不同模型的训练模块、多角度人脸生成模块和人脸匹配模块。系统能够通过输入单一角度人脸图像,选择不同模型生成对应的多角度人脸图像。根据输入的数据集不同,能够对模型参数进行再训练。系统中设定了人脸匹配模块,将模型生成的人脸图像与正脸库做比较,并得到好的匹配结果。
其他文献
果蔬干燥在干燥行业中的占比越来越大,在干燥过程中,便捷的品质检测及品质调控是提高干制品品质,降低能耗和提高干燥效率的必要手段。本文针对果蔬热风干燥时间长、品质低及能耗高等问题,利用微波干燥干燥速度快的特点,研究微波干燥过程中对青萝卜的品质检测方法及调控机制。在品质检测研究中,采用基于介电特性对品质的检测方法,利用网络分析仪,采用同轴探头法测量了在16~3500MHz的频率范围内,湿基含水率为20%
通过收集小麦秸秆经过蒸汽爆破预处理后的爆破液制备水凝胶,不仅减少了对环境的污染,提高了农业废弃物的高值化利用率,也丰富了水凝胶研究的体系。因为小麦秸秆自身的结构特性,以其为主要原料的生物质精炼,需要进行预处理以破坏生物质复杂的抗降解屏障。蒸汽爆破是一种低能耗、少污染且可以有效实现组分分离的热机械化学预处理方法。通过爆破预处理可以使小麦秸秆中的半纤维素降解成可溶性糖,然后过滤使爆破残渣与爆破液分离,
随着平潭综合实验区的开放和发展,平潭辖区特别是海坛海峡中小型船舶流量日益增大,且当前辖区内水工作业项目较多,存在着大量的施工工程船,这些因素导致辖区发生海上安全事故
本文研究了两类时滞HIV-1感染模型,主要利用Hurwitz定理、Lyapunov稳定性理论和LaS alle不变原理等理论对这两类模型的动力学行为进行了研究,主要包括两类模型解的正性、有界性、平衡点的稳定性等.研究结果表明,基本再生数对模型在平衡点的稳定性起着至关重要的作用.全文共分为三章:第一章,介绍了艾滋病研究的历史背景和意义,并对HIV动力学的研究现状进行了综述.最后,简要介绍了本文的主要
黑潮热输运及黑潮跨陆架入侵对我国沿海区域气候变化及海洋生态环境具有重要影响。本文基于JCOPE2海洋模式1993-2016年的高分辨率数值模拟结果,首先计算了通过台湾以东KET(Ku
禽肉现已成为全球第一大类动物蛋白,其产品的安全性也受到广泛关注。在面对活禽交易带来的种种安全隐患同时,更加安全、方便的冷鲜鸡消费已成为大势所趋。在冷鲜时代,品质是禽肉产品的最终评判标准,因此,研究不同品种的肉质及冷鲜鸡肉在不同贮藏条件下的品质变化规律,可以为优质鸡肉评价、保障冷鲜鸡货架期及市场的顺利推动提供理论依据。本研究首先选择了 4种不同生长速度类型的肉鸡(817肉鸡、新广铁脚麻鸡、新兴矮脚黄
随着模具向复杂、精密、大型、长寿命等方向发展,对模具材料的性能要求越来越高。热作模具钢在高温、高压、热冲蚀等环境下工作,服役条件苛刻,要求模具材料在高温下具有较高的热强性、热稳定性和抗冷热疲劳性能。目前,国内外主要通过优化合金成分和改善热处理工艺来提高热作模具钢的高温性能,而碳含量对模具钢高温性能的影响研究较少。本文在4Cr5Mo2V钢的基础上提高碳含量,采用OM、SEM、TEM和自约束热疲劳试验
新能源汽车在日常使用中频发起火和爆炸等严重人身安全事故,因而汽车电子电器部件热可靠性显得尤为重要。目前,利用热电偶开展温升测量具有快速且廉价的特点,是汽车行业开展汽车零部件评估热可靠性的重要手段。但是该方法存在人为误差大、冷端补偿误差大的固有缺点,造成测试精度不高且结果复现性不好。本文从热电偶法测温升原理着手,分析该方法在测试中引入误差的来源,并利用不确定度评价模型对引入误差来源开展了定量表征;依
随着经济社会的发展,尤其是锂电池的大规模使用,全球对锂资源的需求急剧增加。目前,由于传统固相提锂的方法成本高、资源总量不足,人们已经把目光逐步聚焦到液相,尤其是盐湖提锂上来。盐湖提锂主要有蒸发结晶法、沉淀法、萃取法和吸附法等方法,在众多方法中,吸附法由于其选择性高,成本低,污染小,吸引了广泛的关注。锂离子筛(LIS)是一种锂吸附剂,其特有的尖晶石结构为其带来了“离子筛效应”,从而能使该吸附剂在复杂
细菌-噬菌体拮抗进化是分子进化的关键驱动力,在维持微生物多样性方面起着关键作用。一直以来,噬菌体与细菌之间是你攻我防、此消彼长、无穷无尽的共进化过程,它们之间形成了复杂的攻防机制。本研究以共进化第20个周期的低温荧光假单胞菌W-6及其长尾噬菌体VW6S为研究材料,监测了共进化过程中噬菌体侵染力/宿主抗性的变化,对宿主前噬菌体进行初步解析,开展了共进化过程中宿主、噬菌体基因组重测序分析以及共进化过程