7、当你获胜时尽情欢笑：虚拟角色与笑声交互的创新探索

当你获胜时尽情欢笑：虚拟角色与笑声交互的创新探索

在人机交互领域，开发具有自然游戏能力的虚拟角色正成为一个热门的研究方向。这些虚拟角色可以扮演多种角色，如虚拟教师、个人护理助手以及儿童陪伴者等。而笑声，作为一种普遍且复杂但研究相对较少的情感表达，在人机交互和人际交互中都有着重要的意义。

1. 项目背景与目标

计算机角色在人机交互中的作用日益重要，不仅用于娱乐，还涉及教育、辅助和医疗保健等领域。这就要求虚拟角色能够检测和合成情感表达。“当你获胜时尽情欢笑”项目基于欧盟项目 ILHAIRE 以及之前的 eNTERFACE 项目，旨在搭建并测试一个涉及两名人类参与者和一个虚拟角色的游戏场景，即“是/否”游戏。该游戏能引发参与者之间自然的言语和非言语互动，包含许多有趣的事件，例如参与者说出“是”或“否”而输掉游戏。

项目的目标包括：
- 通过 ILHAIRE 合作伙伴开发的软件平台，实时自动分析和融合人类参与者的多模态数据（语音、面部表情、身体动作、呼吸），以检测笑声。
- 合成具有多模态技能的虚拟角色，使其能够以自然的方式产生笑声并与参与者互动。

2. 相关研究现状

2.1 笑声装置

• Fukushima 系统 ：增强用户在观看视频时的笑声活动，由小玩偶组成，在用户发笑时摇晃并播放预录制的笑声。
• AVLaughterCycle ：创建人类与代理之间的笑声驱动交互循环，实时检测人类笑声并从视听笑声数据库中选择声学相似的笑声进行响应。
• Laugh Ma