
kafka
Peasmaster
这个作者很懒,什么都没留下…
展开
-
KafKa概念及基本操作
概述 消息中间件 创建topic kafka-topics.sh --create --zookeeper 192.168.92.200:2181,192.168.92.201:2181,192.168.92.202:2181/kafka --replication-factor 3 --partitions 3 --topic ruozedata tipoc 主题 partiti...原创 2018-06-27 18:02:15 · 265 阅读 · 0 评论 -
Receiver与Direct区别
Spark Streaming 获取Kafka的数据有两种方式:Receiver和Direct。Receiver是通过Zookeeper连接Kafka队列获取数据,Direct是直接连接Kafaka的节点获取数据。 Receiver Receiver是使用Kafka的高层次Consumer API来实现的。receiver从Kafka中获取的数据都是存储在Spark Executor的内存中...转载 2018-07-03 15:04:45 · 1882 阅读 · 0 评论