GPKafka - Kafka流数据导入工具

Pivotal中国研发中心的邱培峰在大数据专场上介绍了GPKafka,这是一个用于将Kafka流数据实时、可靠地导入Greenplum的工具。GPKafka自Greenplum 5.10起提供,支持断点续传、多种数据格式加载和transform功能。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

获得技术资料内容,请访问Greenplum中文社区网站

在10月26日下午举办的北京大数据专场活动中,Pivotal 中国研发中心研发工程师邱培峰为大家带来了《GPKafka - Kafka流数据导入工具》的演讲。

Kafka是分布式消息订阅系统,有非常好的横向扩展性,可实时存储海量数据,是流数据处理中间件的事实标准。当通过Kafka和greenplum搭建流处理管道时,如何高速可靠的完成流数据加载,成为用户最关心的问题。从Greenplum 5.10开始,Greenplum发布了新的工具GPKafka,为Greenplum提供了流数据加载的能力。本次分享主要介绍如何使用GPKafka各种特性,用户可以轻易实现实时数据导入,以及断点续传,各种数据格式加载,以及transform等功能。

分享PPT

2d95ac22-6b65-46d5-a9d3-5a4b70d54915.jpg

fa947bdc-9309-4fec-ba9f-70b8025b96f8.jpg

822ad46e-8bad-4a6e-8b60-ac864ffd46bc.jpg

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值