利用传统的叠加平均方法研究视听语义整合认知时发现多音字的发音和语境异常时能够观测到认知相关的ERP(event related potential)成分。然而,目前对于这个过程中脑区之间功能耦合关系确鲜有研究。因此本文研究的目标是探索中文视听句子语境下多音字视听语义跨模态认知过程中脑区的功能连接变化。研究中展示的视觉刺激的语义的都是合理的,但是多音字的发音在听觉语义下却有四种不同的状态。本研究采用相关系数、相干性和相位一致性(phase synchronization index,PSI)等三种功能连接指标来衡量脑区之间的功能连接,然后使用多变量模式分析(multi-variate pattern analysis,MVPA)的方法来分析多音字发音和语境不同程度失配过程中脑区之间的耦合关系。本文主要通过研究与语言认知过程相关的三个ERP成分—P200,N400和LPS(late positive shift)来研究多音字认知不同阶段脑区之间的功能连接变化。结果发现在P200成分时间窗内,基于相干性功能连接指标的分类效果最好。N400成分时间窗内,由相关系数提取的特征得到的分类准确率最好。LPS1和LPS2成分时间窗内,利用相干性和相位一致性功能连接指标提取特征,对发音、语义异常与对照组分类的时候都可以得到显著的分类准确率。进一步的利用多核学习方法综合三个功能连接指标的研究中发现,各个认知阶段都能够得到显著的分类准确率。本研究通过三个功能连接指标分析多音字视听语义信息整合认知过程中脑区之间的耦合机制,发现在不同时间窗内,脑区之间耦合机制是不同的。此外,在多音字认知的不同阶段激活脑区的分布也是不同的,P200成分时间窗内主要集中于额叶,N400阶段主要在额叶-中央区-顶叶等脑区,而LPS阶段主要在顶叶部分的脑区。综上,这些研究结果表明在多音字视听整合认知过程的不同阶段,脑区之间具有不同的功能连接模式。