韩利鹏

集群安装 1、解压 2、修改server.properties#不同的节点只需要修改id后面的数字就好了 broker.id=1 #这里是zookeeper集群的地址 zookeeper.connect=master:2181,slave1:2181,slave2:21813、将zookeeper集群启动4、在每一台节点上启动brokerbin/kafka-server-start.sh con

往消息队列里面发送数据import kafka.javaapi.producer.Producer; import kafka.producer.KeyedMessage; import kafka.producer.ProducerConfig;import java.io.IOException; import java.util.Properties;import scala.math.Num

在大数据的使用中常常将flume和kafka联合起来使用，实用的时候主要是一个配置的文件信息 配置文件信息如下#agent section producer.sources = s producer.channels = c producer.sinks = r#source section #producer.sources.s.type = seq producer.sources.s.typ

测试环境：scala版本为2.11.8,jdk版本为java1.7.79 搭建的工程为maven工程，所需要的依赖有：<dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-streaming_2.11</artifactId> <version>2