
kafka
kevin_37723298
这个作者很懒,什么都没留下…
展开
-
Debezium获取MySQL Binlog同步到kafka,sparkStreaming实现实时计算
Debezium获取MySQL Binlog同步到kafka,sparkStreaming实现实时计算 版本信息:kafka(kafka_2.11-2.1.1) zookeeper(zookeeper-3.4.10) sprak(spark-2.1.0-bin-hadoop2.7) Debezium(debezium-connector-mysql-0.9.5.Final-plugin.tar.gz) Debezium下载地址 https://repo1.maven.org/maven2/io/debezi原创 2020-09-02 10:46:28 · 1150 阅读 · 0 评论 -
Spark Streaming整合Kafka,Mysql,实时保存数据到Mysql(直接读取方式)
集群分配如下: 192.168.58.11 spark01 192.168.58.12 spark02 192.168.58.13 spark03 spark版本:spark-2.1.0-bin-hadoop2.7 kafka版本:kafka_2.11-2.0.0 Spark Streaming程序 package com.kk.sparkstreaming.kafka import org....原创 2018-12-03 10:42:31 · 5606 阅读 · 3 评论 -
Spark Streaming整合Kafka,Mysql,实时保存数据到Mysql(基于Receiver的方式)
集群分配如下: 192.168.58.11 spark01 192.168.58.12 spark02 192.168.58.13 spark03 spark版本:spark-2.1.0-bin-hadoop2.7 kafka版本:kafka_2.11-2.0.0 Spark Streaming程序 package com.kk.sparkstreaming.kafka import org....原创 2018-12-03 10:43:11 · 1009 阅读 · 0 评论