基于 Apache Doris 的实时/离线一体化架构，赋能中国联通 5G 全连接工厂解决方案

作者：田向阳，联通西部创新研究院 大数据专家

共创：SelectDB 技术团队

导读： 数据是 5G 全连接工厂的核心要素，为支持全方位的数据收集、存储、分析等工作的高效进行，联通 5G 全连接工厂从典型的 Lambda 架构演进为 All in Apache Doris 的实时/离线一体化架构，并凭借 Doris 联邦查询能力打造统一查询网关，数据处理及查询链路大幅简化，为联通 5G 全连接工厂带来数据时效性、查询响应、存储成本、开发效率全方位的提升。

随着通信技术的飞速发展，5G 已成为当今时代的重要标签。在这一背景下，5G 全连接工厂应运而生，不仅代表了工业制造的未来方向，更是数字化转型和智能制造的典范。

5G 全连接工厂，顾名思义，是利用 5G 等新一代信息通信技术，实现工厂内部各个生产单元的广泛连接。这种连接不仅仅局限于设备和系统的联网，更包括人员、物料、环境等多元素的互联互通。通过这种全方位的连接，5G 全连接工厂能够实时收集、分析和处理大量数据，从而优化生产流程，提高生产效率，降低运营成本。

作为中国最大规模的电信运营商之一，中国联通具备广泛 5G 网络覆盖，拥有大量通信基站、光纤网、数据中心等物理网络基础设施，这为建设 5G 连接工厂提供了坚实的基础。同时，中国联通还针对 5G 全连接工厂的需求，提供了一整套解决方案，旨在实现制造型企业生产要素的全面互联和数据实时采集。

联通 5G 全连接工厂解决方案实现生产制造企业各生产要素（人、机、料、法、环、测）的全面互联，面向数字化车间和智能工厂的核心需求，提供统一的平台底座，支持数据实时采集、实时反馈生产运营状况，并建立企业的生产数据中台，对生产过程中的数据进行处理和标准化管理，实现企业数据接口、格式的统一标准，将数据转化为资产，进而为工厂提供高效的数据服务，挖掘数据的价值。

系统需求

数据是 5G 全连接工厂的核心要素，为了支持全方位的数据收集、存储、处理和分析能够高效进行，负责数据汇总存储以及支撑决策分析的数据仓库引擎是其中关键，需要具备以下能力：

01 数据写入需求

5G 全连接工厂涉及大量设备、传感器和系统的连接，将产生海量类型格式各异的实时数据，这些数据具备密度高、维度多的特点。为确保如此大规模数据的流畅写入， 数据仓库引擎必须能够：

• 支持大规模历史存量数据的批量和高效导入；
• 支持高频率、低延迟的实时数据写入，包括生产设备传感数据、业务数据库 CDC 数据以及系统日志数据等；
• 支持基于文件的数据导入能力，包括结构化及半结构化数据文件的导入；
• 对于生产订单、物料使用、人员管理等业务数据，还需要支持基于主键的写入更新能力，确保数据的准确性和一致性。

02 数据查询需求

5G 全连接工厂为企业提供自主在线分析、可视化大屏、经营报表分析等数据服务，并对外开放大量的接口，以满足客户的临时需求。在数据查询场景中， 数据仓库引擎必须响应多种不同模式的查询负载：

• 毫秒级点查询：在对外接口服务中，能够以毫秒级的速度对单个数据点或记录进行查询，并快速返回查询结果，以满足在线实时的查询需求；
• 毫秒级聚合查询：对于按小时、