
Kafka
xinwendewen
我就是个新手
展开
-
Kafka简单部署操作
Kafka简单部署操作启动Kafka需要先启动zk,推荐手动启动zk,不用kafka的命令配置文件zookeeper.properties配置项 dataDir:zk dataDir 配置的目录 clientPort:zk端口 bin/zookeeper-server-start.sh config/zookeeper.properties 启动kafkaBroker配置文件serve原创 2016-06-17 00:18:56 · 325 阅读 · 0 评论 -
Kafka启动脚本
Kafka启动脚本./zookeeper-server-start.sh [-deamon] zookeeper.properties路径参数配置文件zookeeper.properties路径可选参数[-deamon]正常情况下启动kafka会有控制台输出,ctrl+c之后kafka就会停止带上此参数相当于后台运行kafka,在控制台不会有输出最终调用kafka-run-class.shbin/k原创 2016-08-15 15:52:11 · 1215 阅读 · 0 评论 -
Kafka入门资料
Kafka入门资料官网http://kafka.apache.org/几篇不错的blog文章http://www.cnblogs.com/likehua/p/3999538.htmlhttp://www.infoq.com/cn/articles/kafka-analysis-part-1http://colobu.com/2015/03/12/kafka-in-practice/http://ww原创 2016-08-24 23:16:54 · 367 阅读 · 0 评论 -
kafka与ZK
kafka强依赖于ZK,要使用kafka必须要zkkafka哪些信息存于ZK消费偏置信息kafka集群topic信息Kafka在ZK上节点存储参考http://my.oschina.net/u/1419751/blog/360060https://cwiki.apache.org/confluence/display/KAFKA/Kafka+data+structures+in+Zookeeper原创 2016-08-15 14:53:22 · 3951 阅读 · 0 评论 -
Simple Consumer Scala API
Simple Consumer Scala API官方example: https://cwiki.apache.org/confluence/display/KAFKA/0.8.0+SimpleConsumer+Example该模式下 可以指定offset消费,同时也需要对offset进行管理 在建立消费连接之前要确认所消费分区的leader broker 要手动处理leader change原创 2016-06-28 22:53:35 · 566 阅读 · 0 评论 -
Kafka Scala Producer API
Kafka Scala Producer API官方example: https://cwiki.apache.org/confluence/display/KAFKA/0.8.0+Producer+Example构造Producer构造一个kafka.javaapi.producer.Producer<K, V>对象,K:分区key类型,V:消息类型Properties props = new原创 2016-06-28 22:51:26 · 2298 阅读 · 0 评论