如今,信息安全越来越成为人们关注的焦点,单一的密码验证早已被时代所淘汰,主流的身份验证手段是以“what you know”和“what you have”为主,如手机验证码、邮箱验证等辅助验证方式。而人类本身的很多生物特征从“who you are”的原则出发,具有唯一性和可测量性,并且具有便于采集、认证隐蔽、识别效果好和冒认成本高的特点。因此,生物信息可作为新的认证模式进行应用。本实验室内研制的远程说话人认证系统是以中国老年人社保金领取中身份认证功能为需求背景的项目,具有声纹认证、抗录音回放攻击等主要功能,本文将在原有的说话人认证系统之上,增加语音唇动一致判断、假体检测、人脸识别等功能,进一步提升该系统的准确性和鲁棒性,保证用户的信息安全。本文的具体工作如下:1、说话人认证系统的整体框架再设计,在原有的系统框架上进行改进,设计语音唇动一致性检测模块、人脸认证模块、多模态融合认证模块,重新调整了系统内功能模块间的接口,使得系统可以完整运行并实现认证功能。2、语音唇动一致性算法的工程实现,将音视频数据通过预处理模块、特征提取模块、得分判决模块的处理,每个模块包括图像和音频两条线路,根据类型不同对应不同接口,得到置信度评分,通过对比阈值完成语音唇动一致性判断。另外,在原有算法的基础上,进行了部分改良使之更加适应于当前说话人系统。3、人脸认证方法设计,本系统基础的人脸识别方法是基于Fisher准则,利用LDA算法进行数据分类,通过计算未知样本和已有样本之间的欧式距离作为判定依据。本文在人脸认证基础上,尝试了与人脸识别共同计算的方法,并从实验结果证明,新的融合方法一定程度上提升了原有方法的准确性。4、多模态融合认证方法的应用,利用声纹认证模块和人脸识别模块的结果参数进行进一步准确性提升。本文采用自适应加权融合方法,利用阈值的改变影响系统认证决策的侧重面,同时可以一定程度上克服声纹与人脸认证的天生缺陷。