- 博客(4)
- 收藏
- 关注
RSS订阅原创 Error while getting events from Kafka
报错详情 Error while getting events from Kafka at org.apache.flume.channel.kafka.KafkaChannel$KafkaTransaction.doTake(KafkaChannel.java:523) at org.apache.flume.channel.BasicTransactionSemantics.take(BasicTransactionSemantics.java:113)
2020-12-29 20:42:12
322
原创 大数据面试题整理（一）----＞＞Flume
1、flume了解吗。简单介绍一下 Flume是一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统， Agent是flume流的基础部分，Agent是一个JVM进程，Agent的三大组成部分：source、channel、sink。传输数据的基本单元是Event。 优势： Flume可以将应用产生的数据存储到任何集中存储器中，比如HDFS,HBase。 当收集数据的速度超过将写入数据的时候，也就是当收集信息遇到峰值时，这时候收集的信息非常大，甚至超过了系统的写入数据能力，这时候，Flume会
2020-12-28 21:31:26
376
原创 ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: replication factor: 1 large
报错命令 bin/kafka-topics.sh --create --topic vehicle-topic-0224 --partitions 3 --replication-factor 1 --zookeeper node-1:2181/kafka 出现报错 Error while executing topic command : replication factor: 1 larger than available brokers: 0 [2020-12-22 21:09:26,167]
2020-12-22 21:30:01
4476
原创 Linux系统中莫名其妙的进程，kill不掉 ----解决办法
当我们打开系统的时候，查看进程，发现一些莫名其妙的进程，而且还kill不掉 经过查询发现这些进程在一个文件夹中保留， cd /tmp cd hsperfdata_impala/ 可以观察到这与我们存在的进程完全相同 只要我们将这个文件夹中的文件删掉，问题就迎刃而解。并且不会对集群产生任何影响 rm -rf 1808 可以查看下进程确实已经没了 ...
2020-12-16 22:04:32
956
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人