不同的感觉方式如何相互作用以形成感知是认知神经科学的一个基本问题。以往在视听交互方面的研究主要集中在抽象层面,如分类表征（如McGurk效应）。目前还不清楚跨模态调控是否可以扩展到低级感知属性中。本研究使用运动的手势来测试响度感知是否可以被视觉运动信息调节,以及这种调节是如何发生的。具体来说,我们采用了一个新的范式,被试比较了两个相同元音/a/的连续声音的响度,第二个声音与运动手势同时出现。在两个行为实验和两个脑电实验中,我们验证了我们的假设,即手势中的视觉运动信息会调节响度感知。行为结果显示,手势信息会影响被试对于响度的判断。脑电结果表明,声音开始后100ms左右的早期听觉反应（N100）受到手势的调节。两个行为和两个脑电实验的一致结果表明,视觉运动加工可以在早期知觉阶段与听觉加工整合,形成对响度等低级属性的感知。