基于深度学习的广告点击率预测模型研究

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:xynady
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
点击率(Click-through Rate,CTR)预测是对日志数据进行分析,从中提取影响用户点击结果的有效特征组合,进而对广告产品的点击率进行预测的过程。针对采用全连接神经网络进行高阶特征组合学习所存在的参数学习困难、学习效果不佳以及交互过程缺乏可解释性的不足,本文提出两种网络结构:增强型FNN(Enhanced Factorization-machine supported Neural Networks,EFNN)和深度自注意力交互网络。增强型FNN通过添加卷积特征交互单元降低仅依靠全连接神经网络学习特征组合的困难,深度自注意力交互网络则通过添加自注意力特征交互单元,使得模型同时具备学习显式和隐式特征交互的能力,在提高模型预测准确率的基础上,提供了更好的可解释性。论文的主要内容包括以下几个方面:第一、对国内外出现的点击率预测模型进行归纳综述,并根据模型的结构特点进行分类总结。在此基础上,对深度学习的基本知识以及点击率预测的相关技术进行了阐述。第二、对几种高性能深度学习模型的结构进行研究,发现全连接神经网络并行混合有效的特征交互单元,可以提高模型的预测性能。第三、提出一种基于增强型FNN的点击率预测模型,在因子分解向量输入神经网络(Factorization-machine supported Neural Networks,FNN)的基础上添加卷积特征交互单元,该单元设计了一种针对CTR数据的卷积方式,可以有效提取特征组合,降低了仅采用全连接神经网络进行学习的难度。实验结果显示,该模型的AUC(Area Under Curve)较原FNN提升了0.4243%,与对照模型相比,该模型也均取得了相对的性能提升。第四、提出一种基于深度自注意力交互网络的点击率预测模型,模型中的自注意力特征交互单元采用自注意力机制进行特征之间相关性的判断,可有效捕捉全局的特征组合,且交互过程发生在特征的嵌入向量之间,是一种显式交互,具有更强的可解释性。显式交互能力与全连接神经网络的隐式交互能力相配合,可有效提高模型的学习能力。实验结果显示,该模型的AUC达到0.7878,具有较强的预测能力。
其他文献
本文采用数值模拟和实验分析相结合的方法研究430铁素体不锈钢砂金现象。主要工作包括分析砂金缺陷的产生原因,研究430不锈钢热轧阶段碳化物析出行为,提出砂金缺陷优化措施。
针对我国致密油藏开发过程中存在压力水平低、采收率低等问题,本论文以致密岩心驱替实验为手段,明确致密油藏碳化水、碳化水+表面活性的驱替效果及其可行性,为碳化水在致密油
本文设计了一种利用发动机冷却水余热作为热源驱动的吸收式制冷系统,该系统以发动机废热作为驱动热源,不需要消耗发动机功率,可以降低汽车油耗,提高汽车动力性能,实现节能减排的目的,具体工作内容如下:首先对溴化锂制冷汽车空调系统进行了热力学分析,部件热负荷的计算与校核、传热面积和介质流量的计算等。接着设计了与系统匹配的全空冷吸收器,对于内壁面三角形、四边形和圆形表面微结构,得出喷淋溶液在不同粗糙内壁面以及
精准施肥具有提高肥料利用率和经济效益、减少肥料对环境不良影响的作用。广东省自2005年开展测土配方施肥工作以来,积累大量的数据成果。如何利用这些成果建立我省施肥大数
同源四倍体水稻与二倍体水稻相比有着更大的产量潜力,灌浆特性直接影响着水稻的产量和稻米品质;而种子的萌发特性是作物的一个重要农艺性状。因此研究同源四倍体水稻和二倍体
随着人类对电能的应用越来越广泛,通过无线传输的方式实现电能的传输逐渐受到人类的青睐。小至生活常见设施设备,大至航空航天及水下应用设备等都因无线电能传输技术得到更好的发展。无线电能传输相比传统电能传输的优势有供电设备与用电设备不用直接接触避免了磨损、火花、插拔等带来的问题,劣势是传输性能不及传统有线电能传输,且易受环境影响。为了解决无线电能传输效率较低的问题,本文采用磁谐振式无线电能传输方式并加入了
碳/陶复合材料因兼具陶瓷的高强度、高化学稳定性和碳材料的高导电性,在抗氧化、耐腐蚀等传统金属和高分子材料无法使用的空白领域内应用前景广阔。而设计控制功能相在其基体
种间杂交是有性杂交育种中拓宽选种遗传基础的重要途径之一,但有棱丝瓜[Luffa acutangula(L.)Roxb.]与普通丝瓜[Luffa cylindrica(L.)Roem.]杂交产生的F1果实呈现苦味,其后代材料
由于斜交梁桥能很好的适应地形地物的限制,斜交梁已经广泛应用于高等级公路、城市道路和立交枢纽中。但是,由于斜交桥主梁的不规则平面布置和非对称支承特性,使得斜交桥的地
菜心(Brassica campestris L.ssp.chinesis var.utilis Tsen et Lee),又称菜薹,是一、二年生草本植物,属于十字花科(Brassicaceae)白菜亚种中的1个变种,当前在我国华南区域种