基于深度迁移学习的辅助驾驶应用研究

来源 :上海交通大学 | 被引量 : 4次 | 上传用户:stchd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来车辆的日益普及致使交通事故数量呈逐年上升的趋势。ADAS系统通过感知车辆周边环境以及车辆自身行驶状态,对危险的驾驶行为以及可能发生的交通事故进行提前预警与干预。统计数据显示,一些简单的驾驶辅助系统已在实际驾驶环境中应用,并对预防交通事故起到了积极的作用,如检测到行人靠近时自动减缓车速。因此在全球范围内,ADAS系统正获得越来越广泛的关注。本文面向高级辅助驾驶系统(ADAS)中的三大实际应用,(1)360?行人检测,(2)交通标志识别,以及(3)驾驶行为预测,探讨研究深度迁移学习模型在其中的应用方法以及工作原理。深度学习凭借其优异的非线性表示能力,近年来在机器视觉、自然语言处理等领域均取得了卓越的成就。然而在辅助驾驶应用中,多变的驾驶环境、司机间迥异的驾驶习惯以及多元的地区文化等因素均导致深度学习的基本假设:训练数据与测试数据分布一致,无法得到满足。另外,驾驶数据中特有的标注数据不充足、训练数据不平衡、数据噪音严重以及多数据融合等问题,都显著加大了深度架构的训练难度。不同于传统机器学习对数据的严格要求,迁移学习允许训练和测试数据之间存在显著差异,如数据边际分布、条件分布和数据流形差异等。通过挖掘数据之间的相似性,迁移学习将共有知识从数据充分(无噪,标注良好)的源领域迁移到数据不充分(噪音,标注不足)的目标领域,解决定义在目标领域的学习任务,如目标识别、检测、分割等。本文从迁移学习角度出发,面向ADAS的三大实际应用,使用深度模型对其中的难点问题进行数学建模,求解和实验验证。本文的具体研究内容和主要贡献概括如下:1)基于鱼眼摄像头的360?行人检测系统具有视角广、成本低的特点。本文介绍了一套360?行人检测方案,并用该系统构建了鱼眼图像数据集。基于前人的研究成果,本文假设Convolutional Neural Networks(CNNs)模型在鱼眼图像中平移不变性的缺失导致其性能的显著下降。在鱼眼图像中,目标的空间位置决定了其畸变程度,因此重建CNNs的平移不变性等效于学习畸变域不变特征。本文结合鱼眼成像机制与迁移学习理论,提出了Spatial Focal Loss(SFL)用于平衡模型在不同畸变域的性能,从而学习畸变域不变特征。实验结果显示基于SFL的YOLO模型在自建数据集上取得了最佳的行人检测性能。通过分析模型在不同畸变域的漏错检样本数量,验证了学习畸变域不变特征能有效提升YOLO模型在鱼眼图像中的行人检测性能。2)同一交通标志的图像随着环境的变化往往表现出显著的差异性,主要包括却不限于光照、遮挡、褪色程度以及分辨率的差异。如果将这些引起领域差异的因素建模为自然噪音,则源与目标数据是被不同自然噪音污染的脏数据,学习领域不变特征等效于学习对自然噪音鲁棒的低维表示。基于该思想,本文提出了Stacked Local Constraint Auto-Encoder(SLC-AE)深度架构,通过从脏数据中重建干净数据来学习对已知自然噪音(源与目标噪音)鲁棒的低维特征。为了进一步加强模型对未知自然噪音的鲁棒性,本文提出One-step Generative Adversarial Network架构在低维空间中对抗地训练加噪器来模拟多种自然噪音的作用效果,用以学习更稳健的低维特征。在五个迁移基准数据库中评估的实验结果表明,本文所提出的方法不仅对识别不同环境下获取的交通标志有效,对其他一般目标也同样适用。3)司机驾驶行为预测系统是高级辅助驾驶系统中的重要组成部分,它通过提前预测司机驾驶行为,为避免可能发生的交通事故提供充足的应对时间。本文首先介绍了一套基于前置摄像头和OBD(On-Board Diagnostic)数据的驾驶行为预测系统,并用该系统构建了司机驾驶行为数据集。为了对多模态高维环境数据进行建模,并从中提取有效的信息用于预测驾驶行为,本文提出了结合速度不变场景和曲率特征的Scene-ModelTransfer Driving Maneuver Prediction(SMT-DMP)模型,有效地提升了司机驾驶行为的预测精度。针对深度场景特征缺乏解释性的问题,本文进一步提出迁移司机注意力作为中间概念,解耦了驾驶行为与行驶环境的因果联系并显著增强了模型的可解释性。在自制含有1078个驾驶行为的数据库中,本文验证了迁移场景特征与司机注意力能有效提升模型预测司机驾驶行为的精度。
其他文献
随着社会的进步和发展,现代社会中人们对于服务方面的要求越来越高。作为口腔门诊的分诊台护士,每天在工作中需要面对大量的患者,需要接触到各种各样的人群,在他们的工作中也
陕甘边革命根据地是土地革命战争后期全国硕果仅存的革命根据地。以南梁为中心的陕甘边区苏维埃政府是西北地区第一个正式的苏维埃政权。认真总结党在陕甘边区执政的经验教训
花,尤其是樱花,在日本人心中有着十分特殊的地位。俄国诗人Balimon游历日本,归国后将他的印象谈在报上发表,对日本极加赞美,并在游记的篇末写下:“日本与日本人都爱花。日出
烟草稽查中队作为烟草行业打假打私和市场监管的中坚力量,在行业强基础、重基层、严规范的发展导向下,中队的标准化建设已是大势所趋,只有打造一支执法严格、流程规范、行动
胶黏剂是一种通过界面间的相互作用,使得两种以及两种以上的材料紧密结合在一起的物质。环氧树脂胶黏剂因其具有粘接强度高、粘结力大、固化收缩率低、易于加工成型等优点而成为高效的结构胶黏剂。然而,市场上某些工厂所生产的胶黏剂产品威胁到人类的身体健康,对环境也有一定的污染,因此本文通过在胶黏剂中加入陶瓷无机颗粒对其进行性能改性,制备出一种绿色环保且性能优异的胶黏剂,这样可以大大提高胶黏剂的应用范围。用潜伏性
民众生活水平的逐渐改善以及运动的缺乏,导致肥胖及2型糖尿病患者的数量不断增加,也使得癌症的发病率不断增长。现代医学的发展对于癌症的控制已经取得很大的进展,但由于癌症
如今,我们的工作和生活是信息化的,这与云计算技术的发展是分不开的。云计算技术作为信息时代的一次重大飞跃,为我们的工作和生活带来了极大的便利。企业的发展离不开信息技
运用DFT-B3LYP/6-311G(d,p)方法,计算了所设计的三种双环HMX(2,4,6,8-四硝基-2,4,6,8-四氮杂双环[3. 3. 0]辛烷)衍生物分子.基于理论晶体密度和固态生成热计算衍生物分子的爆轰性
建立3,5-二硝基水杨酸(DNS)测定黄水中总糖含量的方法,对检测条件和黄水总糖水解条件进行优化,并进行方法学考察。结果表明,最佳检测条件:显色剂添加量5m L,显色时间7 min,显
盾构区间联络通道融沉注浆施工对盾构管片隆沉有明显影响,就融沉注浆施工导致的三种注浆效果导致的管片隆沉监测进行阐述和数据分析,可为联络通道融沉注浆信息化施工提供参考