基于深度学习的文本到图像生成算法研究

来源 :江西农业大学 | 被引量 : 0次 | 上传用户:ylm1982123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当前社会智能化进程的不断深入,对于数据的使用量需求呈现指数式上升趋势,网络上现有的数据集大多是花费高昂代价人工标注的,所以这就迫切需要一种技术能够实现数据特别是图像数据的高精度合成,以此满足高校、互联网企业、科研院所以及科研个人等不同主体的实验数据需求,这对于科研突破以及社会繁荣稳定发展有着重大意义。近年来,基于文本语义到图像合成的技术在深度学习大环境下得到飞速发展。其基本思想是将文本语义与图像语义投影到同一维度空间。当前的算法大都在朝着这个目标努力同时也取得了一定突破,但是由于不同模态语义空间下的一致性难题使得该问题得不到根本性解决。因此,本文将在现代图像生成技术——生成对抗网络基础上提出一些改进措施,使得文本与图像的语义空间一致性得到改善:(1)基于不同文本粒度策略与文本间域的图像生成。由于文本粒度的选择与图像生成质量息息相关,而且在该图像生成任务中存在着文本语义与图像语义不匹配问题,因此,本文构造了一种全局指导局部注意生成模块,并且在图像生成质量比较上增加了语义比较,完善了文本与图像语义空间一致性生成目标。(2)基于真实图像的间域对抗。由于在现有文本到图像生成的算法中,大多只考虑到生成图像语义与真实文本语义的一致性间隙,忽略了来自真实图像与真实文本所产生的一致性间隙,因此,本文利用镜像思想,将真实图像重新生成对应文本,设计了一种并行文本生成模块,使得图像生成过程充分利用真实图像信息作为助力,从而生成语义更加契合的高分辨率图像。实验结果表明,本文提出的方法与现有其他同类方法相比,在图像质量指标初始分数(Inception Score)和准确度排名(R-precision)上均有提升。本文研究思路为基于深度学习的生成对抗网络在文本到图像生成领域提供了不同经验。
其他文献
硅基光子器件在光互连、光传感等众多应用方面扮演着越来越重要的角色。其中硅基纳米梁腔由于具有品质因子高、结构尺寸小、模式体积低以及没有自由光谱范围的限制等优点,引起了科研工作者的普遍关注。本文基于绝缘体上硅(SOI)平台提出了两种硅基纳米梁腔,一种是具有超低模式体积的领结型硅基纳米梁腔,另一种是具有高灵敏度的硅基悬空多槽纳米梁腔传感器。本文首先介绍了硅基纳米梁腔的基本概念、基本理论、模式类型、研究现
由于量子效应,经典计算机元器件的发展已达到现代物理学的极限。得益于量子叠加态,量子计算机与经典计算机相比能显著加快计算速度。因此,世界各国掀起了研发解决特定问题的量子计算机的浪潮。在过去的几十年间,虽然量子计算随着一系列量子算法的提出不断进步,但距离研制出可扩展的通用量子计算机仍有很长的路要走。因此,在经典计算机上模拟量子计算也变得异常重要,就像VLSI设计中的电路模拟一样。Qsimulation
近年来,开源技术和开源软件深刻影响着人类社会生产的方方面面,构成了现代数字世界的路与桥。开源技术的蓬勃发展与开源社区的繁荣息息相关,开源软件的可持续发展需要稳定的社区贡献者支持,规模庞大的开发者和开源软件项目构成了复杂的开源生态。随着大数据时代的到来,开源生产领域积累了海量数据,如何利用机器学习和数据挖掘方法从数据中洞察出有价值的信息,对于数字化社区治理和开源生态的可持续发展具有重要意义。相似性度
多酚类物质是一类重要的植物次级代谢产物。研究表明,多酚具有抗氧化、抗菌、抗炎、抗肿瘤、抗糖尿病以及预防心脑血管疾病等活性作用,因此在医药、化妆品和食品中得到了越来越广泛的应用。多酚是青钱柳中的重要活性成分之一,但目前尚未引起研究人员的重视,对其的研究和应用还很少。本实验室前期筛选和培育了多种不同表型的青钱柳愈伤系,已经以多酚含量较高的优良愈伤系建立了稳定的细胞悬浮培养体系,为了进一步提高细胞中多酚
学位
学位
江西省是我国食用菌主产区,而香菇属于江西省主栽品种之一,年产量已达20万吨。由于香菇以鲜销及干制加工为主,再加上残次菇及菇柄下脚料加工利用率低,导致香菇产品附加值不高。本论文以残次香菇为原料通过超声辅助技术提取香菇多酚,在单因素试验的基础上,结合响应面法,对香菇多酚提取工艺进行优化;通过多酚清除自由基、抑制2型糖尿病关键酶、ACE酶、胰脂肪酶和胆固醇酯酶等评价香菇多酚抗氧化活性以及降糖、降脂和降血
学位
荸荠(Eleocharis tuberosa)富含大量营养物质,清脆可口,但其表皮坚硬很难剥离,给消费者的食用带来不便。鲜切荸荠能够极大地满足消费者的需求。但荸荠去皮后容易变色,影响食用品质,降低保质期和商业价值。目前,褐变和黄变是鲜切荸荠变色的主要问题。近年来,有研究表明,低浓度的硫化氢(H2S)可以在生物系统中发挥积极作用。本论文以鲜切荸荠为研究对象,通过抗氧化防御系统,酚代谢途径和苯丙烷代谢
油茶(Camellia oleifera Abel)是我国南方主要的木本油料树种。科学的施肥对油茶林地土壤环境具有改善作用,促进林地有益微生物数量的提高,优化微生物群落结构,从而促进油茶树体生长,提高油茶产量。氮素是油茶生长过程中重要的大量元素之一,为研究氮素形态及水平对油茶生长、根际土壤环境的影响,本研究以2年生赣无2号油茶苗为试验材料,进行不同形态氮素及水平的施肥试验,分析不同氮素施肥对油茶生