搭建大数据平台时踩到的坑
文章平均质量分 75
yaya_en
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
接收实时数据 MySQL+Flume+Kafka 配置整合
话不多说,直接切入主题前情概要:编写scala代码,实现定时插入数据到MySQL的功能,模拟实时数据情景工具版本信息:Flume:1.9.0 Kafka:2.11-2.3.1 MySQL:5.6.13基本架构:数据源只有MYSQL,所以采集者Flume和MySQL在同一服务器消费者Kafka我选择集群分布hostserverleaderMySQL,zookeeper,Kafka,Flumefollower1zookeeper,Kafkafollow原创 2022-04-24 14:40:55 · 2947 阅读 · 0 评论 -
关于启动ElasticSearch疯狂失败这件事
使用背景浅浅介绍:nojdk版的es 7.4.2首先在刚刚修改完配置文件后,切换到es用户后第一次启动(es不让root用户启动)出现第一个问题:这里可以看出是配置文件哪里出了问题Exception in thread “main” SettingsException[Failed to load settingsfrom [elasticsearch.yml]]; nested:ElasticsearchParseException[malformed, expected settings原创 2022-04-04 18:26:53 · 2703 阅读 · 0 评论 -
部署impala后,启动hadoop时,datanode启动失败
由于impala的配置文件是依赖于hadoop和hive的,所以在部署impala时,会在之前配置好的hadoop配置文件的基础上再进行修改。本次报错主要体现在 修改了hdfs-site.xml<property> <name>dfs.domain.socket.path</name> <value>/var/run/hdfs-sockets/dn</value></property>配置后,启动h原创 2022-03-20 17:52:28 · 3033 阅读 · 1 评论
分享