有效提高语音可懂度的深度学习语音增强算法研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:mucao_xkhl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于深度神经网络(Deep neural networks,DNN)的映射或分类语音增强体系结构和传统方法相比,语音可懂度实现了显著提高,但是它们仍然有进一步改进的空间。因此,本文首先对基于DNN的语音增强方法中用于训练阶段优化的代价函数进行改进,提出一种基于感知相关代价函数的深度学习语音增强方法,能够有效减少训练代价函数和人类听觉感知的不匹配。接下来,通过分析传统语音增强算法的体系结构和基于DNN的语音增强方法,并将两者优势互补,提出一种基于DNN的抑制增益估计语音增强方法,能够实现可懂度性能的进一步提升。本文所研究的主要内容涉及到以下几点:首先,对基于不同代价函数的有监督学习语音增强方法进行了研究。网络输出和训练目标之间的均方误差(mean squared error,MSE)代价函数和基于人类听觉感知的评价标准是不匹配的,因此将MSE代价函数用于网络模型的优化不能保证语音可懂度一定提高;而频域加权分段信噪比(frequency-weighted segmental SNR,fw SNRseg)是一种能够反映人类听觉感知的语音可懂度客观评价标准。因此,本文通过将这一评价标准引入到网络参数训练中,提出一种基于感知相关代价函数的深度学习语音增强体系结构。通过系统的客观评价发现,在各种噪声类型和信噪比情况下,本文提出的方法和基于MSE代价函数的DNN方法相比,测试语音的短时客观可懂度(short-time objective intelligibility,STOI)分数进一步提高,同时保持语音质量不再受损。接下来,本文对不同的基于DNN的数据驱动语音增强算法进行了研究。基于映射的端到端的回归DNN语音增强模型可以有效的清除噪声分量,但是该方法产生的语音失真问题比较严重。而抑制增益参数的估计在传统的单通道语音增强体系结构中扮演着重要角色,通过将DNN方法与传统单通道语音增强框架结合,本文提出了基于单个DNN的抑制增益估计语音增强算法,并对DNN的输入进行了因果上下文扩充,以实现实时信号处理,将每个频带的抑制增益和对应的含噪语音幅度谱相乘,即可得到增强语音幅度谱。在此基础上利用多个DNN分别估计干净语音幅度谱、语音存在概率和抑制增益参数,并引入显式噪声方差估计,提出了结构化的基于DNN的抑制增益估计方法。此外,这些DNN方法都是基于上述感知相关代价函数进行训练的。最后通过对这些DNN方法的评价结果进行对比,表明和利用回归DNN直接估计干净语音的方法相比,将DNN方法嵌入到统计噪声抑制算法的体系结构中,并代替其中某些参数的估计会得到更好的STOI结果。
其他文献
中国共产党第十九次全国代表大会提出乡村振兴战略,坚持城乡融合发展,推动人才、土地、资本要素的双向流动,建立金融机构激励机制,吸引社会资本流入乡村,扭转乡村资本市场目
自改革开放以来,中国学者的国际学术交流活动愈来愈多,中国“文化走出去”战略也在稳步实施,大量的外文学术期刊应运而生。但是与其他非英语发达国家相比,中国大陆英文期刊的
随着科学技术的不断进步,各种各样满足人类需求的机器人已经出现在了人们的工作和生活中。在目前,机器人在自由空间的位置控制已经取得了良好的效果,但随着机器人应用领域的
分层调制作为一种新兴的重叠码技术,现已成为重要的研究趋势。其能够对抗卫星信道中降雨等衰落因素并使得卫星通信系统的频谱效率提高。本文对卫星信道下的分层调制技术进行
新的高中历史课标强调要以历史学科核心素养为培养目标,促进学生自主学习及合作探究等实践能力的提高。而学生主体性发挥是促进学生全面发展的重要保证,因此在历史教学中充分发挥学生主体性,以促进学生全面发展,就具有重要意义。但从理论与教学实际两方面来看,目前将历史学科核心素养与学生主体性相结合的研究依旧较少,同时历史课堂中学生的主体地位往往并没有得到充分尊重,主体性也并没有得到应有的发挥。基于社会发展与课改
移动互联网时代的到来,为日本数字出版提供了发展的契机。日本是最早出现手机小说的国家,利用移动技术I-MODE搭建手机小说网络平台,语言类似于对话式的表达形式,小说主题和内
兰州国际马拉松从2011年创立开始就备受瞩目。在长达8年的历史进程中,成功打造了属于自己的马拉松品牌,被业界评为最难“PB”的金标赛事。2019年,国际田联路跑会议首次落户中
迄今为止,降维在数据挖掘、模式识别和图像处理领域依然是一个研究热点。流形学习作为非线性降维的主要代表方法,在处理非线性数据集时表现良好,但是仍然包含一些缺陷。例如
在2018年,我国证券市场上同时出现两家企业申请重新上市,最终只有一家成功。我国退市制度经过了几十年的发展,进入如今相对较完善的阶段,重新上市制度也终于出现首例实践者,
钨属于稀有金属,有着“工业的牙齿”美誉,在国家安全和国民经济等领域都有普遍应用,占据着举足轻重的地位,被多个国家列为战略资源,成为一种战略性金属。"十三五"时期是钨产