23、个性即时电影选角：沉浸式电影体验系统解析

个性即时电影选角：沉浸式电影体验系统解析

1. 系统概述

在当今的娱乐领域，人们对于沉浸式体验的需求日益增长。有一种创新的系统——未来选角系统（FCS）应运而生，它能够让观众轻松地融入电影之中，成为电影角色，享受独特的沉浸式电影体验。

1.1 系统工作原理

FCS 系统的核心工作流程是从捕捉参与者的面部信息开始，生成对应的 CG 面部模型，然后将其插入到预先制作好的电影中。具体来说，在表演开始前，系统会自动完成从面部扫描到 CG 角色生成的整个过程。首先，获取与变形通用面部网格上顶点对应的访客面部扫描深度数据，然后将访客的正面面部图像附加到网格上。扫描数据，包括面部模型、估计的年龄和性别信息，会被传输到文件服务器。在表演时，从文件服务器调用访客的角色信息，如面部几何形状、纹理等，并使用为每个演员和电影场景定义的“演员/环境场景数据”来控制面部。通过面部表情合成和重新打光生成的面部会被渲染到场景图像的面部区域，从而生成 CG 角色说话和表达情感的动画，仿佛角色就是访客本人。

1.2 系统特点

FCS 系统具有两个关键特点：
- 自动创建 CG 角色：能够在几分钟内自动完成从捕捉参与者面部信息、生成对应 CG 面部模型到将其插入电影的整个过程。
- 多人参与：使多人能够轻松地同时以不同角色参与电影，例如家庭成员或朋友群体。

1.3 应用案例

该系统在实际应用中取得了显著的成果。在 2005 年日本爱知世界博览会的三井 - 东芝展馆，有 163 万人体验了 DIM 电影。从 2007 年 3 月开始，该系统在日本长崎的豪斯登堡得到了扩展应用，并成为那里最受欢迎的景点之一。在豪