32、虚拟环境中的木偶操控与社交信号传递技术探索

虚拟环境中的木偶操控与社交信号传递技术探索

1. Geppetto系统相关项目介绍
   • Avatar项目
     • 项目目的与场景设定 ：Avatar项目利用数字木偶来练习跨文化沟通技巧。创建了两个场景，一个在阿富汗的普什图地区，另一个在纽约的城市环境中。每个场景有三个木偶，分别是一位年长的领袖、一个年轻的理想主义者和一个反派。参与者要在每个场景中与通过木偶操作的训练有素的交互者进行成功的谈判练习。
     • 微姿势系统设计 ：为了减少TeachME项目中实时动作捕捉的限制，设计了微姿势系统。每个木偶包含一组全身最终姿势，这些姿势体现了每个木偶通过手和身体姿势进行交流的特点。使用缩小版的双红外相机动作捕捉系统来跟踪交互者的头部方向和演员手腕的位置。
     • 校准过程与姿势混合 ：通过让交互者模仿每个特征木偶姿势，建立了他们现实世界中手腕位置和木偶手腕位置的数据库。编写程序根据交互者的手腕位置从木偶中找到两个最接近的姿势，并为每个姿势赋予置信权重。这两个姿势会根据权重进行混合，同时之前使用的姿势权重会随时间衰减到零。面部姿势控制采用了TeachME中的五指手套隐喻，用非戴手套的手握住WiiMote代替了Ergodex游戏控制器。
     • 系统优势与问题 ：该系统设计的木偶仅展示符合文化习惯的手势，通过交互者手中的3D定位器可以无缝控制这些手势，交互者通过自己的头部移动直接控制木偶的头部。