35、虚拟角色动画：从情感表达模拟到手语呈现的挑战与突破

虚拟角色动画：从情感表达模拟到手语呈现的挑战与突破

1. 情感化虚拟角色的目光与头部动作模拟

在创建具有情感表达的虚拟角色时，目光和头部动作的模拟至关重要。研究者开发了具有情感表现力的目光和头部动作模型，并进行了用户研究，以测试这些模型生成的面部动画序列的情感表现力和自然度。

1.1 用户研究结果

• 情感表达方面
  • 对于虚拟ECA，目光行为的变化可成功表达其唤醒水平的变化。
  • 头部行为的变化能成功表达虚拟ECA的唤醒/支配水平的变化。
  • 结合目光和头部行为的变化，能成功表达虚拟和机器人ECA的唤醒/支配水平的变化，即使情感水平在其他维度同时改变时也适用。
• 自然度和情感表达方面 ：虚拟ECA比机器人ECA更自然，但参与者在感知虚拟ECA不存在的唤醒/支配水平变化的意外情况更多。此外，参与者使用机器人ECA确定情感正确描述符的任务完成得更成功，这可以用恐怖谷效应来解释，即机器人ECA虽自然度较低，但情感表达更丰富。

1.2 模型贡献与改进方向

• 模型贡献差异 ：目光模型对整体情感表现力的贡献明显小于头部动作模型。并且当前模型生成的目光行为不足以成功表达虚拟ECA支配水平的变化。
• 改进方向
  • 目光行为研究 ：应开展更多关于用目光行