17、虚拟现实中社交技能训练与机器学习的共创之路

虚拟现实中社交技能训练与机器学习的共创之路

1. 虚拟现实技能实验室项目概述

沉浸式虚拟现实（VR）训练的应用场景十分广泛，它起源于早期的战斗或飞行模拟器，随后被应用于专业技能培训、应急响应人员训练、工作场所安全培训等多个领域。近年来，其关注点逐渐转向处理情绪、社交互动和沟通等复杂的训练问题，如培养同理心、克服公众演讲焦虑、应对多样性等。

此时，一个关键问题摆在研究人员和开发者面前：如何将交互式VR体验与人类之间的社交互动相媲美，以满足基于真实世界互动模拟的有效训练需求？能否设计出一种机器智能，使其不仅能根据对话中处理和传达的信息与人类进行对话、行动和反应，还能考虑到沟通的社会、文化和情感层面？

为了实现人类与虚拟代理之间一定程度的自发性互动，人机交互需要借助多种机器学习形式，如聊天机器人、语音或情感识别等。虚拟现实技能实验室（VSL）项目作为一个跨学科的研究与开发项目，为我们提供了一个独特的视角。该项目旨在开发一个使用虚拟现实进行社交技能训练的研究原型。为此，正在开发一个场景，玩家通过头戴式显示器置身于虚拟办公室空间，扮演经理与处于压力情境下的员工进行互动。

1.1 创意实验室

2018年9月，一场为期5天的“创意实验室”活动催生了该项目的创意。来自研究机构和企业的代表围绕未来人机交互的设计方式展开探讨，提出了各种项目创意。“创意实验室”的主要目标之一是在整个研发过程中切实推动跨学科合作。因此，该项目汇聚了从事基础和应用研究的学者，以及来自企业文化和学习技术领域的从业者和开发者。项目的成功不仅取决于目标和方法，更在于其开放的过程。

在创意过程中，有人提出利用文化卓越研究所（ice）在100多个研讨会上收集的数据。这