【摘 要】
:
大数据给现代社会带来了新的机遇,也因为海量样本和高维度给统计学领域带来新的挑战.庞大的数据量被单台计算机内存储和计算所限制,越来越多的数据以分布式形式分散地存储在不同计算机节点上.数据在分布式框架下存储时,将全部数据输入同一台处理器进行统计推断的方法不仅受到计算机内存和计算速度的限制,同时带来通讯成本较高和隐私泄露等问题.在分布式框架下使用朴素分治算法,是将全局数据的参数估计问题分作每个子数据块的
论文部分内容阅读
大数据给现代社会带来了新的机遇,也因为海量样本和高维度给统计学领域带来新的挑战.庞大的数据量被单台计算机内存储和计算所限制,越来越多的数据以分布式形式分散地存储在不同计算机节点上.数据在分布式框架下存储时,将全部数据输入同一台处理器进行统计推断的方法不仅受到计算机内存和计算速度的限制,同时带来通讯成本较高和隐私泄露等问题.在分布式框架下使用朴素分治算法,是将全局数据的参数估计问题分作每个子数据块的子问题,再通过平均等方法将局部估计聚合.这种分布式计算通常只在线性目标函数中才得到一个较为精确的估计.因此,对于目前普遍的分布式存储形式,设计适用于分布式框架的算法是有必要的.本文提出了两种通讯有效的梯度增强快速收缩算法(CGEAS,CAGEAS).本文通讯逻辑是节点并行计算并向中心处理器通讯局部信息,中心处理器聚合信息后,向所有计算机广播.本文在节点并行计算时使用梯度增强损失.与局部损失相比,梯度增强损失是全局损失的近似函数,避免局部估计带来的高偏差.同时梯度增强损失仅需通讯计算机节点的梯度信息,但包含了二阶导数的信息.算法使用Nesterov加速梯度方法(NAG)加快梯度增强损失的收敛速度.与快速迭代阈值收缩算法(FISTA)相比,本文提出的算法不需要良好的初始参数,并且保留了FISTA的收敛速度.此外,本文还提出了两种稳定的通讯有效的梯度增强快速收敛算法(CGEAS(α),CAGEAS(α)),修正了CGEAS算法和CAGEAS算法因为NAG加速造成的迭代后期估计振荡的缺陷.同时,修正后的算法通过增加近端梯度项,放宽了分布式存储数据间的同质性假设.本文证明了几种算法的收敛速度,同时实验模拟验证了本文提出的通讯有效的梯度增强快速算法达到其理论效果,与其他分布式算法相比具有很好的表现.
其他文献
移动互联网技术的发展使网络社交媒体平台蓬勃兴起,人们在平台上能够进行多种形式的信息互换和沟通交流,关键意见领袖是能够在社交网络中占据关键节点的一类人群,他们能够对大众消费者产生重要的影响,刺激消费者的购买需求,影响他们的购买决策过程。为了探究社交媒体平台上关键意见领袖“带货”的机制,为企业进行关键意见领袖营销提供参考性的建议,本文以SOR模型为理论基础,结合信息质量与信息采纳模型和购买决策理论,建
部编本初中语文教科书中的插图类型繁多、功能多样,是十分重要的教学资源。插图以文字所无法替代的视觉优势,在帮助学生理解课文内容、促进能力发展等方面起着很大的作用。但在实际的教学中,由于教师对插图的认识不到位,运用插图的方法缺乏等多方面的原因,导致插图的作用在实际教学中无法充分地发挥出来。为了提高插图的教学效果,展开了对插图的研究。论文主要分为四个部分:第一部分为绪论,包括选题缘由、插图研究的目的和意
关系类别学习是指习得如何分类以内部关系结构为划分依据的类别刺激的认知过程。由于关系类别学习需要人们习得类别信息的核心结构关系,并且人们习得的结构关系有助于关系知识的迁移推广,所以关系类别学习被认为是连接认知心理学和教育心理学的交叉领域,研究意义重大。大部分学者认同关系类别学习与类比推理中的重要过程一致,故采用类比推理的结构映射理论(the structure mapping theory,简称SM
债券融资在经济发展和资本市场运行中具有不容忽视的重要地位。与欧美发达国家相比,我国公司的债券融资在整体资金结构中的占比并不高,尚有进一步增长的空间。而我国的公司债券市场建立虽不久,但发展势头强劲,具有极大的潜力,未来的市场规模值得期待。债券融资成本是影响融资决策和方式选择的重要考虑因素,学者们对债券融资成本影响因素的研究覆盖了宏观、债券特征和公司特征等多个角度,但目前较少考虑大股东个人行为可能带来
目前,我国正处在发展时期,高速公路交通安全设施的需求较大,但政府投资不能满足高速公路交通安全设施的建设需求,因此造成高速公路交通安全设施供给不足。政府为解决此问题,允许外界企业投资高速公路交通安全设施管理,进而满足国家和人民群众对高速公路交通安全设施的需求。所以高速公路交通安全设施管理的从设计阶段、建设阶段再到运营阶段由多家单位参与,从而造成对高速公路整个全寿命周期的管理不系统、不全面。这样会对高
多年来,认知过程的发生与学习效率的提升是教育学及心理学持续关注的问题。本文基于身心二元论到一元论转变的理论背景展开研究。身心二元论体现了对身体的漠视、贬低的浓厚氛围,这种观念下所形成的教学活动是仅存于大脑,与“颈脖”以下身体无关的。但在具身认知理论下,认知、思维和学习是身体与环境塑造的,学习活动是“身心一元”的。基于这种理论背景,文章首先回顾了具身认知相关研究的国内外现状,并将具身认知理论的研究围
课后练习题与选文是一个有机整体,具有巩固和延伸选文的作用,是学生基本知识点和能力点得以训练和夯实的操练场。利用课后练习题指导教学实践,不仅可以帮助学生检测学习效果,还可以帮助教师明确教学目标、勾画教学重难点,其教学价值不容忽视。本文重点对部编本教材中古诗词课后练习题的编写情况进行系统深入地研究,在此基础上提出合理化的使用建议,以期最大限度地发挥课后练习题在诗词学习中的辅助作用。本研究主体内容包括以
高校扩招导致毕业大学生人数逐年递增,同时中国经济在多年高速增长后增速必然放缓,在疫情的冲击下大学毕业生就业问题凸显;当然,困境亦是机遇,大学生自主创业不失为一条出路。创业意向是创业行为的必要前提条件,探索创业环境对大学生创业意向的影响研究至关重要。本研究围绕创业意向这个核心概念,通过“创业环境——创业激情——创业意向”这一主要路径,探析以创业激情为中介变量、以创业自我效能感为调节变量的创业环境对大
如今,中国也正以前所未有的速度积极融入世界经济发展大势之中。联合国贸易和发展会议指出,出海并购已经成为各国公司改善经营战略、进行业务拓展的主渠道之一。但是,目前进行海外并购的行业企业仍集中于制造业等传统行业,以保健品行业跨国并购事例为切入点,探究中国公司跨境并购绩效的系统研究比较缺乏。因此,本文以汤臣倍健公司海外并购LSG这一事件作为研究对象,以小见大,通过分析这次海外并购绩效,以期实现我国保健行
研发-营销界面管理议题具有丰富的理论成果,同时对于市场竞争日益激烈的技术密集型的汽车行业极具研究必要性和重要性。理论方面,国内外关于研发-营销界面管理的概念及其内部构面仍然存在探索空间。新产品开发是一个集流程性与创新性、自主性与规范性于一体的复杂过程,因此界面管理的研究通常被置于新产品开发过程中。实务方面,在可持续发展浪潮中的中国汽车企业正处于产业转型升级过程中。许多车企在“电动化、智能化、网联化