Apache InLong 简介

Freedom3568

于 2022-11-07 17:06:37 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据技术栈文章标签： InLong 数据集成简单介绍架构特性

本文链接：https://blog.youkuaiyun.com/zhanggqianglovec/article/details/127734856

大数据技术栈专栏收录该内容

38 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

Apache InLong是一个由腾讯捐献给Apache社区的数据集成平台，提供自动、安全、可靠和高性能的数据传输，支持批流一体。InLong包括数据采集、汇聚、存储和分拣功能，具有简单配置、灵活扩展和高稳定性。其组件如inlong-agent、inlong-dataproxy、inlong-tubemq、inlong-sort等，分别服务于数据采集、传输、处理和管理。InLong Sort新增了对Flink 1.13.5的支持，并引入Standalone模式，同时支持通过认证访问Apache Pulsar，DataProxy增加了HTTP/UDP协议支持。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

InLong 简介

Apache InLong（应龙）是一个一站式的海量数据集成平台，提供自动、安全、可靠和高性能的数据传输能力，同时支持批和流，方便业务构建基于流式的数据分析、建模和应用。InLong 支持大数据领域的采集、汇聚、缓存和分拣功能，用户只需要简单的配置就可以把数据从数据源导入到实时计算引擎或者落地到离线存储。

Apache InLong（应龙）是腾讯捐献给 Apache 社区的一站式海量数据集成框架，提供自动、安全、可靠和高性能的数据传输能力，方便业务构建基于流式的数据分析、建模和应用。InLong 项目原名 TubeMQ ，专注于高性能、低成本的消息队列服务。为了进一步释放 TubeMQ 周边的生态能力，我们将项目升级为 InLong，专注打造一站式海量数据集成框架。

Apache InLong 以腾讯内部使用的 TDBank 为原型，依托万亿级别的数据接入和处理能力，整合了数据采集、汇聚、存储、分拣数据处理全流程，拥有简单易用、灵活扩展、稳定可靠等特性。

InLong架构图
在这里插入图片描述