
kafka
李白星河
nlp算法工程师
展开
-
将kafka中的数据消费到mysql的两种方式
方式一package demo01import java.sql.{Connection, DriverManager, PreparedStatement}import java.text.SimpleDateFormatimport org.apache.kafka.clients.consumer.{ConsumerConfig, ConsumerRecord}import or...原创 2020-04-23 21:11:59 · 6490 阅读 · 0 评论 -
Txt文本传数据到Kafka的两种方式
方式一 自定义合并分区类import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.Producer;import org.apache.kafka.clients.producer.ProducerRecord;import java.io.Buffere...原创 2020-04-23 21:07:07 · 2111 阅读 · 0 评论 -
Kafka中steamAPi操作
/*用于实现将一个topic的数据读取后从转换成大写,再将结果写入另一个topic*/public class StreamAPI {public static void main(String[] args) { Properties props = new Properties(); //设置程序的唯一标识 props.put(StreamsConfig.APP...原创 2020-04-01 10:41:40 · 377 阅读 · 0 评论 -
自学kafka部分知识点汇总
(Kafka阶段)简答题:1、Kafka生态系统四大角色,生产者(Producer)、kafka集群(Broker)、消费者(Consumer)、zookeeper2、每个消费者都必须属于一个消费组,一个组内的消费者可以多个。3、一个Topic可以有1到多个多个分区(Partition)4、一个分区可以有1到多个segment。5、每个segment可以有由一个log和一个index组...原创 2020-03-30 20:51:45 · 589 阅读 · 0 评论