54、“背上的耳朵”：无声世界里的声音体验之旅

“背上的耳朵”：无声世界里的声音体验之旅

1. 声音景观翻译的模态选择

在将声音景观进行转化的方式中，视觉似乎是首要选择。但我们并不想破坏表演中原始视觉部分所带来的体验。将语音转化为视觉表演主区域下方的字幕，是电影为可能不完全理解原文语言的观众制作时常用的标准补充方式。然而，字幕会丢失所有关于节奏、动态和音高的信息。当视觉屏幕格式偏离适合人类视觉标准区域的黄金比例时，例如使用垂直（智能手机生成）图像作为图像源，会在主区域旁边提供模糊的视觉提示。我们认为这是一种额外的可能性，甚至是一种艺术机会，但它并不能完全替代声音元素，无法充分触发声音景观所能带来的完整体验。

另一种可行的方式是触觉刺激。如果在观众身体的不同位置施加这种刺激，我们可以提供关于频率（以赫兹为单位，虽不如人耳精确，但至少能划分几个频率范围）、响度（以分贝为单位）和位置（与人耳感知方式相同）的信息。

2. “背上的耳朵”可穿戴设备设计

基于上述考虑，我们设计了“背上的耳朵”可穿戴设备，旨在构建一个模拟声音景观，帮助聋人通过触觉感知声音在音高、方向和强度上的变化。

2.1 基本硬件规格

硬件名称	功能描述
集成芯片 CPU	过滤左右声道音频源为 5 个不同频率带（0 - 150、150 - 200、200 - 250、250 - 500、500 - 2000Hz），处理并测量每个频率带的响度（dB），向相应的 LED 灯贴片和振动器发送指令，触发振动