米歇尔·希翁 | 视听：幻觉的构建

（本文节选自《视听：幻觉的构建》/米歇尔·希翁著/黄英侠译/北京联合出版公司/2014年版）

1.声音对运动感知和速度感知的影响

• 声音运动

视觉和听觉感知具有比我们所认为的更加迥异的特性。我们之所以仅仅模糊地了解这一点，就是因为这两种感知在视听合约中相互影响，通过感染与投射，它们相互借鉴各自的属性。

首先，每种感知与动态和静止的关系完全不同，因为听觉与视觉相反，它从一开始就预先假设了运动。在含有运动元素的电影影像中，画框中许多其他事物可能保持固定不动，但声音由于它特有的 质，必定暗示一种位移或骚动，无论是多小的程度。声音确实具有暗示静止不动的方法，但只有在有限的情况下。人们说“不变的声音” 就是指那些无论听到的是什么也不会引起变化的声音。这种特性只有在某些人造声源的声音中才能发现：拨电话盘的拨号声或扬声器的嗡 嗡声。 急流和瀑布的声音也可能产生一种隆隆的近似白噪声（white noise）的声音，但人们很少忽视那些哪怕是最小的无规律性和动态的 痕迹。 不变的声音效果也可以取一段变化的声音，把它们放在一个无限重复的循环圈中来产生。 因此声音具有它自己的时间动态（temporal dynamic），就像一种运动或一个弹道的痕迹。

• 感知速度的差异

声音感知与视觉感知因属性不同而有着各自的平均速度，基本说来，耳朵分析、处理、合成的速度要快于眼睛。 拿一个快速的视觉运动来说——一个手势——与相同时长的突发声音过程来比较，快速的视觉运动不会形成一种清晰的轮廓，它的过程不会以一个精确的影像进入记忆。 同样的长度，声音过程可以成功地勾勒出清晰和确定的结构，独立、可以识别、可与其他声音区分开。

这不是注意力的问题。 我们可以聚精会神地看视觉运动的镜头十次（例如，一个角色做一个复杂的手势动作），仍然无法清楚地辨别它的轮廓线。 重复听十遍快速的声音段落，你对它的感知将会在精度上越来越确定。

这里有几个原因。 首先，对于听别人说话，声音是语言的载体， 而且说出的语句使耳朵迅速地工作； 相比较而言，用眼睛来阅读就慢 了许多，除了一些特殊训练的个别案例，如聋哑人。 眼睛感知更慢些， 因为它同时要做的事情更多一些，它必须在空间中探索，同时还要跟 随时间的变化。 耳朵辨别出听域（auditory field）中的一个细节，并且及时跟随着这个点或线（但如果耳边的声音是一段熟悉的音乐，听觉注意就更容易从时间线中偏离开去做空间探索）。 所以大体上，在 第一次与视听信息的接触中，眼睛在空间上更擅长，耳朵在时间上更胜一筹。

2.声音对于影像中时间感知的影响

• 时间化（temporalization）的三个方面

增值的最重要效果之一与影像中对时间的感知有关，声音会对它 发挥相当大的影响。 我们在上文已提到一个极端的案例，就是在《假面》 的开场段落，通过水滴和脚步声将非时间性的静态镜头变为一个时间 的连续流。 声音通过三种方式使影像时间化。

第一，影像的时间活力（temporal animation）。 在影像中，声音 在不同程度上将对时间的感知渲染成精确的、详细的、即时的、明确 的——或模糊的、波动的、宽泛的。

第二，声音给镜头赋予时间的线性感。 在无声电影中，镜头并不 总是表示时间的连续，只是镜头B中发生的事跟在镜头A展示的内容 之后展示。 但有了同步 存在的声音，就确实产生了一种连续感。

第三，声音使镜头向量化（vectorize）或使镜头戏剧化，使它们 朝向一个未来、一个目标，并且产生一种急迫感和期待。 镜头向某处 发展并在时间中被确定方向。 我们可在《假面》的开场段落清楚地看 到这种作用的效果——例如在第一个镜头中。

• 声音使影像时间化的必要条件

以下三类效果能否起作用，取决于被放在一起的声音和影像的性质。

第一类： 影像本质上没有时间活力或向量。 这是静态镜头的情况， 或它的运动只是一般的波动，没有表示可能的结果——例如，波动的水。 这个例子中，声音可以把影像带入一种完全由声音自身产生的时 间感。

第二类： 影像自身具有时间活力（角色或物体的运动、烟或光的 运动、运动的构图）。 这里，声音的时间感与影像中已有的时间感相结合。 两者以一致或稍微对立的方式运动，就像两件乐器同时演奏的 情况。

使影像时间化也取决于出现的声音类型。 根据声音的强度、内部 特征、音质和声音的发展变化，可以使影像的时间活力更强或更弱， 并带有或多或少驱动的或抑制的节奏。 下面为不同的作用因素：

（1）声音持续的方式。 平滑而连续的声音比不平滑或波动的声音更少“活力”。 尝试一下，先在小提琴上拉一段长音、稳定的音符以配合影像，然后以同样的音符但以快速碎弓拉一段颤音与之配合。 第二种声音将引起更强的张力，以及使注意力迅速集中在影像上。 （2）当声音进行时，具有怎样的可预见性。 具有规律脉动的声音（如音乐中的通奏低音或是机械的钟表滴嗒声）拥有很强的可预见性，它们较之不规律的、不可预见的声音产生的时间活力较弱； 不可预见的声音使耳朵的注意力持续处于警觉状态。 《假面》中的滴水声，以及塔可夫斯基的影片提供了很好的范例： 通过不规则的韵律使我们保持注意力。

但是，一种过于规律重复的节奏也可能产生一种紧张的效果， 因为听者在这种机械的规律性中期待一种变化的可能性。

（3）节奏速度。 声音如何在时间性上给影像以活力，不仅仅 是一个机械的节奏问题。 一段快速的音乐不一定必然给影像的感知加速。 使影像时间化实际上更多地取决于听觉流的规律性或非规律性，而非从音乐感觉角度所说的节奏。 例如，如果音符的流动在速度上是中速的但不稳定，它的时间活力比速度快但却更规则的流动的音符要高。

（4）声音清晰度。 高频丰富的声音将更强烈地控制感知，这就解释了为什么观众对许多近期电影的注意力更加集中。

使影像时间化也取决于声—画结合的模式和同步点的分布（见下文）。 在这里声音激活影像的程度，也取决于它如何运用同步点（points of synchronization）——可预测或不可预测、变化或不变化。 掌控住观众对声画关系的期待，往往能在使影像时间化（使影像具有时间感）上发挥强大的作用。

总之，要使声音对影像的时间感造成影响，最低限度的条件是必需的。 首先，影像必须是适合的，不论是静态的还是在接受性上是被动的（比较《假面》中的静态镜头），或是有其自己特有的运动（可被声音“时间化”［temporalizable］的微观韵律）。 在第二种情况下，至少影像应该含有对声音流而言的结构因素——无论是和谐 （agreement）、协约（engagement）、同感（如我们所说的共鸣）的因素， 还是积极的抵触因素。

本文为北大公共传播转载

版权归作者所有

编辑 | 李堃

图源丨网络

欢迎合作 | 投稿

pcsdpku@163.com