Unity Open Day 北京站-游戏专场：Rokid XR 技术及应用开发与落地场景

【获取 2023 Unity Open Day 北京站演讲 PPT】

石文峰：我是Rokid 的OS总工程师石文峰，今天给主要给大家介绍我们的YodaOS-MASTER和SDK的关键技术，以及对开发者的支持政策。

首先简单介绍我们公司。Rokid成立于2014年，是一家专注于新一代人机交互技术产品平台的公司，目前主要致力于AR眼镜等软硬件产品的以及YodaOS-MASTER系统为载体的生态系统构建，我们的产品在全球80多个国家和地区有销售。

我们的系统叫“YodaOS-MASTER”，我们为什么要做自己的OS呢？我们在2018年最开始做AR眼镜时就发现，AR眼镜的交互是3D的、空间化的，而传统的人机交互，比如PC/手机，它们的交互都是2D的、平面的。已有的OS无法满足3D空间化交互的需求，因此从2018年开始我们就不断打磨3D空间化的OS。苹果专门定制一款VisionOS，相信跟我们是基于同样的理由。

这是我们YodaOS-MASTER系统框架图，它主要分为三部分。最左边的是端上的OS，右上角是XR云，右下角是XR硬件适配支持。我们端上的系统是基于Linux和安卓基础之上构建的一套交互的OS，采用分层化设置，在基础的OS层之上是XR能力层，包括图像感知、声学感知、姿态感知等感知系统，还有手势识别、语音识别、空间定位为代表的理解系统，还有图形渲染等为代表的展现系统，这些能力封装在能力层。能力层之上是XR框架层，包括一系列技术框架，多窗口管理、通知管理、动态资源管理等等。再上层是SDK层，SDK层之上是应用层，包括系统应用和开发者应用等等。

作为一个现代化的操作系统，除了有强大的端上能力，云端能力也是不可或缺的。除了基础的帐号服务、应用市场等基础云服务之外，我们也为大家提供了实时音视频通信平台、多人协同平台以及数字资产创作平台等XR的云平台。