
Kafka
文章平均质量分 52
kafka尤其是流式处理应用中可以说是必不可少的一环
80后大叔爱学习
2023年10月开始更新博客内容均为逆向相关的,其它内容暂时不会更新,没有太晚的开始,不如就从今天行动。
展开
-
CDH大数据平台 18Cloudera Manager Console之Sentry权限kafka测试(markdown新版)
kafka-sentry权限生产者、消费者测试原创 2022-10-17 17:48:17 · 514 阅读 · 21 评论 -
CDH大数据平台 ERROR tools.ConsoleConsumer$: Error processing message, terminating consumer process:
sentry消费权限不够解决方法原创 2022-10-17 17:38:03 · 470 阅读 · 3 评论 -
CDH大数据平台 16Cloudera Manager Console之Sentry权限配置和测试(markdown新版)
Sentry权限管理hive、hue、hdfs等原创 2022-10-11 23:24:07 · 2504 阅读 · 188 评论 -
CDH大数据平台 15Cloudera Manager Console之flume、kafka安装和配置数据采集实战(markdown新版)
cloudera manager console实战flume采集kafka数据原创 2022-10-09 18:41:09 · 1944 阅读 · 108 评论 -
CDH大数据平台 13Cloudera Manager Console FreeIPA 用户规划(markdown新版)
freeIPA用户团队权限规划原创 2022-10-01 17:34:51 · 756 阅读 · 13 评论 -
CDH大数据平台 06Cloudera Manager服务添加&&HDFS、YARN等HA高可用(markdown新版二)
cdh必要服务添加,hdfs、yarn、hbase做高可用配置原创 2022-09-23 09:46:44 · 949 阅读 · 17 评论 -
HADOOP VM三台虚拟机配置hadoop分布式(还是有部分人操作遇到问题,特分享,尤其是初学者)
VM三台虚拟机配置hadoop分布式,还是有部分人操作遇到问题,特分享,尤其是初学者,希望把精力放到重点上面,资源里面有免费的pdf文档分享0积分下载原创 2022-07-24 07:56:36 · 1049 阅读 · 0 评论 -
JAVA yunyisu\KafkaProducerTest.java使用了未经检查或不安全的操作
对错对比原创 2020-12-30 10:31:47 · 278 阅读 · 0 评论 -
FLINK Producer数据写入到kafka 方法三
package kafkaproducer;public class Data { public String user; public String activity; public long timeStramp; public int pageViews; public String typeP; public String city; public Data() { } public Data(String user,.原创 2020-07-28 19:35:23 · 2973 阅读 · 5 评论 -
FLINK Producer数据写入到kafka 方法二
package kafkaproducer;public class Data { public String user; public String activity; public long timeStramp; public int pageViews; public String typeP; public String city; public Data() { } public Data(String user,.原创 2020-07-28 19:33:58 · 1222 阅读 · 0 评论 -
FLINK Producer数据写入到kafka 方法一
package kafkaproducer;import com.alibaba.fastjson.JSON;import org.apache.flink.api.common.serialization.SimpleStringSchema;import org.apache.flink.streaming.api.datastream.DataStreamSource;import org.apache.flink.streaming.api.environment.StreamExec.原创 2020-07-28 19:31:42 · 2737 阅读 · 4 评论 -
KAFKA java.lang.NoSuchMethodError: net.jpountz.lz4.LZ4BlockInputStream.<init>(Ljav
在diea里面跑spark程序发生jar包冲突,kafka的LZ4版本屏蔽掉原创 2019-05-27 18:42:03 · 2284 阅读 · 0 评论 -
KAFKA WARN [main:NetworkClient@589] - Connection to node -1 could not be established. Broker
常见问题原创 2019-05-15 14:53:05 · 1077 阅读 · 0 评论 -
KAFKA value foreach is not a member of org.apache.kafka.clients.consumer.ConsumerRecords[String,Stri
因为reducedList是java.util.HashMap, 没有foreach方法, 所以需要将其转换为Scala的集合类型,因此需要在代码中加入如下内容(Scala支持与Java的隐式转换),import scala.collection.JavaConversions._ ...原创 2019-05-14 11:23:57 · 1162 阅读 · 0 评论 -
ZOOKEEPER Will not attempt to authenticate using SASL (unknown error)
删除zoo.cfg里面配置dataDir=日志存储路径中version-2,即可解决原创 2019-05-14 08:24:52 · 4604 阅读 · 3 评论 -
flume消费到kafka配置
a1.sources = r1a1.sinks = k1a1.channels = c1a1.sources.r1.type = avroa1.sources.r1.bind = mastera1.sources.r1.port = 44444a1.sinks.k1.type = org.apache.flume.sink.kafka.KafkaSinka1.sinks.k1.k...原创 2019-05-05 14:41:46 · 96 阅读 · 0 评论