Storm的Zookeeper启动报错

最新推荐文章于 2021-02-21 23:14:53 发布

原创最新推荐文章于 2021-02-21 23:14:53 发布 · 1.4k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#zookeeper #storm #异常

本文详细描述了一次技术故障排查过程，主要涉及Zookeeper未启动导致的Storm无法启动问题。通过检查发现日志目录未创建是根本原因，并解决了此问题。提醒运维人员注意检查关键组件配置。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

【ZooKeeper异常】Error contacting service. It is probably not running.

今天测试说我们的storm启动不了了，就一步一步查找原因。

1、首先查看Zookeeper。执行命令bin/zkServer.sh status就报上面的错误。发现Zookeeper根本就没有启动。上网找原因，大家遇到的问题都一一排除了。最后发现竟然是日志目录没有创建上，导致Zookeeper报错了，于是就手动的把Zookeeper目录创建上了。再次启动，发现正常了。不知道谁把zookeeper的日志目录给删除了，郁闷啊。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

qdsuiyuan1984

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Apache storm安装教程（单机版）

猿小白的博客

12-01

787

Apache Storm 是一个分布式实时计算系统，专为处理大规模流数据而设计。它允许开发者实时处理大数据流，并对数据流进行分析、操作、转发等，能够保证低延迟、高吞吐量的处理能力。

记一次 Centos7.6 安装部署基于 zookeeper 3.6.2 集群的 Storm 2.2.0 集群

一花一世界

12-27

450

http://storm.apache.org/ http://storm.apache.org/downloads.html https://mirror.bit.edu.cn/apache/storm/apache-storm-2.2.0/apache-storm-2.2.0.tar.gz https://mirrors.bfsu.edu.cn/apache/storm/apache-storm-2.2.0/apache-storm-2.2.0.tar.gz https://mirrors.tuna.

参与评论您还未登录，请先登录后发表或查看评论

【Zookeeper在storm中扮演的角色】

07-27

371

一、Zookeeper在storm充当的作用 Storm的所有的状态信息都是保存在Zookeeper里面，nimbus通过在zookeeper上面写状态信息来分配任务，supervisor，task通过从zookeeper中读状态来领取任务，同时supervisor, task也会定义发送心跳信息到zookeeper，使得nimbus可以监控整个storm集群的状态，从而可以重启一些挂掉的t...

启动storm任务时，异常提示

dengmanzhou3124的博客

08-01

439

启动storm任务时，异常提示： 14182 [NIOServerCxn.Factory:0.0.0.0/0.0.0.0:2000] WARN o.a.s.s.o.a.z.s.NIOServerCnxn - caught end of stream exceptionorg.apache.storm.shade.org.apache.zookeeper.server.ServerCnx...

storm nimbus不能启动 ------zookeeper、storm踩过的坑

yushuiying的博客

08-07

1252

在单机中配置完成zookeeper和storm后，启动zookeeper，没报错，有进程；启动storm的nimbus，会出现一会进程，后面有没有了，一直在找storm的问题，后来看日志，发现是2181的端口不能通信，可能是zookeeper的问题，（后来改zoo.cfg中的设置）增加一个服务器的设置，最后正确的配置如下： # The number of milliseconds of each tick tickTime=2000 # The number of ticks that the initi

zookeeper 大量连接断开重连原因排查

weixin_33738982的博客

06-04

3600

问题现象最后发现线上的zookeeper的日志zookeeper.out 文件居然有6G，后来设置下日志为滚动输出，参考： http://blog.youkuaiyun.com/hengyunabc/article/details/19006911 但是改了之后，发现一天的日志量就是100多M，滚动日志一天就被冲掉了，这个不科学。再仔细查看下日志里的内容，发现有很多...

Storm集群配置与启动

hongye301的博客

01-21

1924

一、Storm集群配置搭建总体的架构：实现步骤： 1.安装和配置jdk 2.安装和配置zookeeper 3.上传和解压storm 4.配置storm安装目录conf目录下的storm.yaml文件 storm.yaml配置示例：找到storm.zookeeper.servers: 添加服务节点，如下： storm.zookeeper.servers: - “zkp1” - “zkp2” ...

Storm数据流分组报错的解决方式

Diana的博客

03-28

1978

4677 [main] INFO o.a.s.s.o.a.z.s.ZooKeeperServer - Server environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GMT 4678 [main] INFO o.a.s.s.o.a.z.s.ZooKeeperServer - Server environ...

Storm2.1.0启动失败org.apache.storm.utils.NimbusLeaderNotFoundException

weixin_45642452的博客

02-21

492

Apache的Storm组件的安装教程有不少，官方文档翻译版，厦大提供的教程，各种教程大同小异，其中我在安装完storm2.1.0后启动zookeeper,然后 storm ui 准备进入浏览器验证是否成功，发现报错：看样子应该是conf目录下的storm.yaml文件配置错误，通过检查storman安装目录下的的logs/xxx.log文本文档里的日志，发现错误：看来是storm.yaml里的目录位置配置有问题，就是下面这两个首先把已经建好的目录权限改一改，没有用。然后又把目录的位置胡乱

大数据个人笔记——Zookeeper、Hadoop、flume、hive、sqoop、hbase、kafka、storm、spark的安装及使用

Winyar的博客

12-31

1620

大数据笔记 Zookeeper的安装及使用安装步骤如下： [root@localhost ~]# cd /home/software [root@localhost software]# tar -xvf zookeeper-3.4.10.tar.gz [root@localhost software]# cd zookeeper-3.4.10 [root@localhost zookeepe...

Storm排错调优之SessionTimeout

Simon的博客

08-16

3696

Storm排错调优之SessionTimeout 在Storm的日志和zk的日志中均有如下连接超时信息： Unable to read additional data from client sessionid 0x364f4b880...

Kettle（一）安装

weixin_43329319的博客

08-21

377

文章目录1、Kettle介绍2、JDK安装3、Kettel安装 1、Kettle介绍 Kettle是一款国外开源的ETL工具，纯java编写，可以在Windows、Linux、Unix上运行，数据抽取高效稳定。Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个壶里，然后以一种指定的格式流出。 Kettle家族目前包括4个产品：Spoon、Pan、CHEF、Kitchen。 SPOON 允许你通过图形界面来设计ETL转换过程（Transformation）。 PAN 允许你批量运行

zookeeper使用问题汇总

Searcher_Recommeder的博客

06-23

5841

一，现象 zookeeper版本是3.4.5 Unexpected Exception: java.nio.channels.CancelledKeyException at sun.nio.ch.SelectionKeyImpl.ensureValid(SelectionKeyImpl.java:55) at sun.nio.ch.SelectionKeyImpl.interestO

zookeeper在hadoop中的作用以及数据的读写和领袖推选机制

Marlboro_2的博客

08-27

2283

1.zk的作用分布协调服务，解决分布式服务在工作时产生的问题 1)竞态条件 //多个主机同时对一个文件进行操作，俗称抢资源 2)死锁： //多个主机互相等待对方完成 3)不一致性： //资源文件丢失或者主机宕机 2.zk在hadoop中 hadoop的namenode的高可用及自动容灾,也就是在多namenode 情况下,对name...

Storm在Zookeeper中的目录结构

end's coding life

08-05

1627

源代码是 backtype.storm.cluster /-{storm-zk-root} -- storm在zookeeper上的根 | 目录 | |-/assignments -- topology的任务分配信息 | | | |-/{topology-id}

本地kafka开启，zookeeper一直报错

zhenzi_PeppaPig的博客

11-27

1052

总结各种可能的解决方案： 1.删除/tmp目录下的kafka和zookeeper日志 2.康老师改了部分配置： cd /usr/local/kafka/config vim zookeeper.properties 修改： dataDir=/usr/local/kafka/data vim server.properties 修改： log.dirs=/usr/loc...

storm运行过程中UI页面出现Connection refused错误

Rong_89的专栏

09-19

8434

org.apache.thrift7.transport.TTransportException: java.net.ConnectException: Connection refused at org.apache.thrift7.transport.TSocket.open(TSocket.java:183) at org.apache.thrift7.transport.TFramed

解决Zookeeper无法启动问题

Postgres 数据库内核开发工程师

09-03

4629

1. 概述首先，zookeeper的配置（conf/zoo.cfg）是ok的。但是启动Zookeeper服务的时候，不报错，也没有任何提示。然而服务就是起不来，端口（默认2181）也不在线。使用lsof 或是 netstat -apn | grep 2181查看端口的时候，可以看到zookeeper服务是没有起来的。接着我看了zookeeper.log 日志，可以看到一...

zookeeper启动报错