13、5G 高级移动宽带与 AI 助力的多媒体技术发展

5G 高级移动宽带与 AI 助力的多媒体技术发展

1. 5G 高级移动宽带需求与全息通信

1.1 5G 传输延迟

在 5G 高级移动宽带中，延迟和可靠性要求是基于视频帧（或文件）层面的，不包括应用程序错误和延迟。如果 XR 应用程序托管在国家中央数据中心（DC），传输网络往返时间约为 10 - 40 毫秒，这取决于与数据中心的距离以及传输网络的建设情况。通过将应用程序迁移到区域数据中心，传输延迟可降低至 5 - 20 毫秒；若部署在边缘站点，延迟可进一步降低至 1 - 5 毫秒。对于具有网络功能和本地托管应用程序的本地网络部署，传输延迟可忽略不计。

1.2 全息通信

全息通信是指对远程人员的 3D 表示进行实时捕获、编码、传输和渲染，这些 3D 表示以 3D 视频的形式显示在 XR 头戴设备中，提供类似全息图的视觉效果。研究领域分为专业级和消费级用户数字表示。专业级数字表示通过使用多个摄像头和实时工作室录制创建；消费级数字表示则借助支持 AI 的 3D 捕获设备在消费级手机或平板电脑上生成。

全息通信需要处理和传输各种格式的沉浸式视觉媒体，这些格式比传统视频会议中使用的 2D 视频格式更能呈现逼真和交互式的人物和/或环境视觉表示。点云（PC）是一组表示封闭体积的点，每个 3D 点包含特定帧中的位置信息、颜色体素和强度值。网格通过三角形将这些点连接起来，忽略冗余点并填充孔洞。通过减少顶点数量，网格可以进一步清理和简化，其大小可能比点云小得多，从而提高存储、传输和渲染速度。

新的沉浸式媒体格式在 XR 通信场景中的应用极大地提高了通信双方信息传输的吸引力、实用性和效率。3GPP 在 R18 研究中致力于改进 5G 系