- 本杰明·霍格特(Benjamin Hoguet)
- 一月25,2017

什么是双耳声音,如何在工作中使用它? 专门研究数字媒体音频工具的Amaury La Burthe解释了这项技术如何为“ 失明笔记”虚拟现实体验的成功做出了贡献。
新的叙事形式为声音设计师创造了温床,并且正在开发越来越多的创新。 在这些创新中,双耳声音是一项特别受关注的技术,即它与移动和虚拟现实体验高度兼容。 实际上,双耳声音给人的感觉是陷入环绕声(360°)环境中。
为了掌握这种特定类型声音的潜力,我会见了Audiogaming和Novelab的创始人,互动体验的设计师Amaury La Burthe,在这些领域中,音频往往起着至关重要的作用。 他最新的合拍作品之一《 失明笔记 》( Notes on Blindness )几乎被公认为是虚拟现实的主要杰作。 这是一种将双耳声音与迷人的视觉环境相结合的体验,使我们能够体验失明男人的现实。
双耳声音有什么特别之处?

我们将回到“失明笔记” ,但让我们从双耳声音的本质开始。 奇怪的是,这项技术的起源可以追溯到一个多世纪前! 的确,早在1881年,法国工程师克莱门德·阿德(ClémentAder)研发的剧院电话就可以收听方圆两公里以内的卡尼尔歌剧院的表演。 用户必须将两部手机放在耳朵上。
当然,今天的双耳声音要复杂得多,但基本概念仍然不变:忠实地再现我们的自然聆听模式,以便能够在空间中定位声音。
戴上最好的耳机,然后收听此视频,体验以下内容:
从我们最早的童年开始,我们的大脑就通过解释右耳和左耳之间的知觉变化来学会在空间中定位声音。 双耳声音试图重现这种感觉:如果声音在稍有延迟之后到达您的右耳,则声音似乎是从左侧到达的。

正是这种转变使我们的大脑“误以为”,当我们通过音频耳机听到声音时,声音就会在“空间化”的声学环境中传播。 相反,立体声会在耳机中产生单声道感觉,因为声音似乎是从我们的头顶发出的。
因此,这种360°双耳感知非常适合相同性质的视觉环境:虚拟现实。 在沉浸式体验中,这种配对充满希望。 但是,仍然需要克服一些障碍……
双耳声音的局限性
毫无疑问,第一个障碍是使用耳机。 如今,许多人几乎永久地与他们在一起,但情况并非总是如此。 这就是为什么在电视统治时期这种技术多少被忽略的原因。 那时没有理由戴耳机。
如今,移动和虚拟现实设备已成为主流,这解释了为什么双耳技术再次变得有趣。 然而,产生双耳声音仍然是一个挑战。
当前的问题既不是技术也不是生产成本。 “材料不尽相同,因此会有一些额外的成本,但它们远非令人望而却步。 它不会使音频成本增加四倍。” Amaury La Burthe保证。
不,双耳声音的主要问题是物理性质。 我们都有不同的头脑,我们的大脑学会了以不同的方式解释声音信号。
我们的形态和耳朵的形状会影响所听到声音的频率和振幅。 我的头和耳朵的形状与您的不同,因此我们对双耳的声音会有不同的感觉。

资料来源: 肖恩·费尼
“其头与所谓的平均头有很大不同的人不会听到非常外在的声音,(可能听起来)几乎是立体声。 我们还没有成功克服这个局限。”当拉伯特(La Burthe)在这里援引“平均头”时,他不仅仅是在使用隐喻。 通常,要记录双耳声音,在硅胶头上放置两个麦克风,以记录应该到达我们耳朵的声音。

双耳声音也可以在工作室中产生(在这种情况下,它被认为是合成的而不是本地双耳的)。 合成的双耳声音实际上是单声道声音,可以使用基于算法的专用音频编辑设备进行转换。 这就是“ 失明笔记” ( Notes on Blindness)的创作者所使用的方法,这是一部独特的作品,其中通过声音讲述故事。
关于失明的笔记 ,为历史服务的双耳声音
《失明笔记》首先是彼得·米德尔顿和詹姆斯·斯普尼的一部精湛的短片,展示了美国神学家约翰·赫尔的录音,他记录了他在1980年代初逐渐失明的情况。 该项目后来与ARTE一起演变成故事片形式,该组织还试图产生一种独一无二的数字体验。

其结果是由Agat Films / Ex Nihilo,Archer’s Mark,Audiogaming和ARTE联合制作的虚拟现实作品《 关于失明的笔记:进入黑暗》 。
“在《失明笔记》中 ,约翰·赫尔讲述了他头三年试图重建某些东西的故事,直到他在最后一张录音带中承认他决定放弃他曾经知道的东西并拥抱他的东西。作为盲人的新观念。
“他的磁带占用了大约30个小时的音频,即300至400个转录的页面。 这是一个巨大的基础! 因此,我首先找到了他谈论声音的所有段落,这就是使我能够形象化事物的原因,不仅是描述性段落,而且是使阅读产生景象的段落。” La Burthe回忆道。
与许多创新作品一样,“ 失明笔记”的格式已经有了很大的发展。 最初,它的目的是作为一个有趣的而不是富有诗意的移动应用程序。 从那时起,事情发生了很大的变化,原始概念在虚拟现实中呈现出视觉效果,从而可以更雄辩地讲述约翰·赫尔的故事。 但是,一件事并没有改变:声音的重要性。
“我们正在寻找一种非常具体且令人身临其境的声音。 确实, 失明笔记中的所有声音都被认为是空间化的,因为它们对应于空间中非常特定的位置。 例如,如果这是我在视野中看到的:

…因此,我会感觉到旋转木马的声音来自我的左边。 但是,如果我转过头,现在旋转木马就在我的右边,则相应的双耳声音将在实时调整时给我正确的听觉…
“计算是在人转过头时做出的。 它是瞬时的,[…]给我们带来了一些问题,因为我们必须在移动设备上实时运行30到40种声音-这绝非易事。 我们花了大量的时间优化应用程序。 最初,电话会在公园停放两到三分钟后崩溃(体验的第一个场景[作者注])。”
根据人的视线实时提出如此丰富和适应性强的音频环境是一项重大技术成就。 它解释了《 失明笔记》的大部分情感力量,尤其是这些“空间化”的声音与John Hull单声道录制的声音形成了鲜明的对比。 因此,我们的印象是,他的话语直接传到我们的头上,而环境通过这些360°的声音和视觉元素引起了我们的好奇心。
尽管如此,仍进行了测试,以将John Hull的声音放在我们的耳朵旁,并给人留下了Hull暗中向我们窃窃私语的印象。 但是根据拉·伯特(La Burthe)的说法,最终结果是“非常令人不安”。 这很好地证明了双耳声音不能保证自身的沉浸感。 需要正确使用!
双耳声音总是值得吗?
关于失明的注意事项应该使您相信双耳声音的沉浸式力量。 尽管该技术具有固有的某些限制,但随着虚拟现实日益成为主流,双耳声音应进一步发展。
但是,不存在双耳声音无所不在的情况。 La Burthe认为,其使用必须遵循与所有类型和支持都不兼容的艺术过程。
“在虚拟现实中,双耳声音令人惊叹。 我们受益于视觉深度和声学深度。 […]作为其他沉浸式体验(如视频游戏)的一部分,我也相信它可能会带来好处并有助于使体验更深入。
“如果声音足够,双耳声音会很有意义。 例如,以古典音乐为例。 但是,使用双耳产生流行音乐是否值得? 我不知道。 无论如何,到目前为止,我还没有听到任何可以说服我的东西。
“强行,它可能适合恐怖。 360°恐怖是一个非常适合双耳声音的利基市场。 […]相反,在电影或《行尸走肉》之类的电影中,我真的想听平面视觉背景下的双耳声音吗? 我对此深信不疑。”
双耳声音的许多用途尚未发现。 因此,请毫不犹豫地评估它与您的下一个项目的相关性。 同时,我邀请您下载“失明笔记”,并建议您看看RTBF的Burkland系列。 这是首个结合双耳声音的产品。 您的耳朵会感谢您的…