记一次storm启动报错。。

最新推荐文章于 2022-09-02 11:26:55 发布
原创 最新推荐文章于 2022-09-02 11:26:55 发布 · 316 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#storm

本文记录了一次解决Kafka与Storm集群运行问题的经历，最初怀疑是Kafka broker故障，尝试重启Kafka和Storm集群均未奏效，最终通过debug和搜索发现是代码配置错误，特别是集群模式与本地模式执行方法不同导致的问题，并强调了pom文件中需注释掉的部分。

storm0.95
怎么错的呢。以为是Kafka broker挂了，又重启Kafka，不管用，又是重启storm集群，也不行，一遍debug一遍百度，最后发现是代码问题，集群模式和本地模式的执行方法是不一样的(丢人呐)，如下。
这两个是不一样的
这个pom文件的这里也得注释掉！
在这里插入图片描述

【Flink实战系列】Flink各种报错汇总及解决方案(实时更新中)
JasonLee实时计算
01-25 3万+
这篇文章主要用来记录一下Flink中的常见的报错以及解决方案(以后会持续更新) 1,Table is not an append-only table. Use the toRetractStream() in order to handle add and retract messages. 这个是因为动态表不是append-only模式的,需要用toRetractStream(回撤流)处理...
17.大数据学习之旅——Strom集群中各角色说明&JStorm介绍&Storm的应用场景&Trident框架& Storm可靠性保证&Storm的容错机制
零零天
01-12 1052
Strom集群中各角色说明 概述 每一个工作节点上运行的Supervisor监听分配给它那台机器的工作，根据需要启动/关闭工作进程，每一个工作进程执行一个Topology的一个子集；一个运行的Topology由运行在很多机器上的很多工作进程Worker组成。那么Storm的核心就是主节点（Nimbus）、工作节点（Supervisor）、协调器（ZooKeeper）、工作进程（Worker）、任...
storm启动报错Halting process: ("Error when processing an event")
愤怒的苹果ext的博客
11-22 2636
2016-11-22 08:50:39 o.a.z.ClientCnxn [INFO] EventThread shut down 2016-11-22 08:50:39 o.a.z.ZooKeeper [INFO] Session: 0x1588ccfba17000b closed 2016-11-22 08:50:39 o.a.c.f.i.CuratorFrameworkImpl [INFO]
storm启动报错及解决办法
csdn9874123的博客
11-20 4675
第一个错误描述：org.apache.storm.utils.NimbusLeaderNotFoundException: Could not find leader nimbus from seed hosts ["192.168.226.13"]. Did you specify a valid list of nimbus hosts for config nimbus.seeds? 解决
（二十六）Storm常见错误及处理方法
Ares_song的博客
06-27 1496
1. 发布topologies到远程集群时，出现Nimbus host is not set异常 原因是Nimbus没有被正确启动起来，可能是storm.yaml文件没有配置，或者配置有问题。 解决方法：打开storm.yaml文件正确配置：nimbus.host: “xxx.xxx.xxx.xxx”，重启nimbus后台程序即可。 2. 发布topologies到远程集群时，出现AlreadyAliveException(msg: xxx is already active)异常 原因是提.
Storm集群配置与启动
hongye301的博客
01-21 1943
一、Storm集群配置 搭建总体的架构： 实现步骤： 1.安装和配置jdk 2.安装和配置zookeeper 3.上传和解压storm 4.配置storm安装目录conf目录下的storm.yaml文件 storm.yaml配置示例： 找到storm.zookeeper.servers: 添加服务节点，如下： storm.zookeeper.servers: - “zkp1” - “zkp2” ...
写一个脚本判断logstash是否在运行 不再的话重启，目前发现 卡死报错 进程也在 pid没法判断 ，我使用nohup启动
最新发布
12-16
CHECK_INTERVAL=60 # 每60秒检查一次 TIMEOUT=10 # curl 超时时间 MIN_EVENT_INCREASE=10 # 至少要有10个新事件才算活跃 MAX_RESTARTS=3 # 防止频繁重启保护 # 日志函数 log() { echo "[$(date '+%Y-%m-%d %H:%M:%...
大数据平台安装实验: ZooKeeper、Kafka、Hadoop、Hbase、Hive、Scala、Spark、Storm
zyw2002的博客
03-26 3547
文章目录实验1：Hadoop大数据平台安装实验1. 实验目的2. 实验环境3. 实验过程3.1 虚拟机的搭建3.1.1 安装虚拟机3.1.2 基本linux命令3.2 准备工作3.2.1 关闭Selinux3.2.2 安装软件3.3.3 检查网卡是否开机自启3.3.4 修改hosts3.3.5 检查网络是否正常3.3.6 新建hadoop用户3.3.7生成ssh密钥并分发3.3.8 安装NTP服务3.3 安装MySQL3.3.1 安装3.3.2 测试3.4 安装JDK3.4.1 安装3.4.2 测试3.5
一篇经典的 Redis 面试资料「处女座笔记」「吐血推荐」...
Java Punk
09-02 1257
一篇经典的 Redis 面试资料，很清晰，很全面，很详细，很值得收藏，应对大厂面试，这一篇就足足足足足够了
Storm1.0安装过程及遇到的错误处理方法
一名java从业者的专栏
09-30 9936
Storm1.0安装下载 org.apache.storm.utils.NimbusLeaderNotFoundException: Could not find leader nimbus from seed hosts ["127.0.0.1"]. java.io.IOException: Found multiple defaults.yaml resources
storm在本地运行出现错误信息
csdn9874123的博客
11-20 6735
6985 [main] INFO  o.a.s.l.AsyncLocalizer - Cleaning up unused topologies in /tmp/181f740f-15f5-4b53-987e-f41206245329/supervisor/stormdist 6989 [main] INFO  o.a.s.d.s.Supervisor - Starting supervisor
storm启动报错，storm-ui界面显示不正常
weixin_38205301的博客
04-17 2894
第一个问题： 启动失败，访问：8080，storm-ui界面，显示“无法访问此网站” 解决方法 查看报错信息：The storm client can only be run from within a release. You appear to be trying to run the client from a checkout of Storm's source code. You c...
storm常见问题解决方案
半僧
12-11 1191
发布topologies到远程集群时，出现Nimbus host is not set异常 原因是Nimbus没有被正确启动起来，可能是storm.yaml文件没有配置，或者配置有问题。 解决方法：打开storm.yaml文件正确配置：nimbus.host: “xxx.xxx.xxx.xxx”，重启nimbus后台程序即可。 发布topologies到远程集群时，出现AlreadyAliveE
Storm 集群异常的解决
玛雅人靠谱
12-07 1163
背景: 5台机器, 部署storm计算节点, 2台机器drpc节点. 环境如下:              Storm: 0.7.1              Linux: CentOS 5.5          Java:  jdk 1.6.37       问题:storm 集群总是在运行一段时间后某些节点停止工作, 工作进程退出.       解决过程: 1)  查看storm日
Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hado
热门推荐
qq_15613319的博客
05-12 6万+
1.解决步骤：打开 /tmp/root/hive.log查看日志，没有发现什么有用的2.开启mapereduce 的histroy;  $sbin/mr_jobhistory_daemon.sh start historyserver3.从jobhistory/job/job_1526113286554_0004的Diagnostics:REDUCE capability required is ...
本地运行storm时报错
afei2530的博客
07-13 256
java.lang.NoClassDefFoundError: backtype/storm/topology/IRichSpout at java.lang.Class.getDeclaredMethods0(Native Method) at java.lang.Class.privateGetDeclaredMethods(Class.java:2701) ...
Storm的并行度详解 Strom Topology执行分析：worker数，Bolt实例数，executor数，task数
qq_36864672的博客
12-13 9452
Storm的并行度详解 Storm的并行度是非常重要的，通过提高并行度可以提高storm程序的计算能力。 那strom是如何提高并行度的呢？ Strom程序的执行是由多个supervisor共同执行的。supervisor运行的是topology中的spout/bolt task task  是storm中进行计算的最小的运行单位，表示是spout或者bolt的运行实例。 程序执行的最大...
storm安装注意事项记录
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
01-05 1729
笔者在安装storm的过程中，出现了一些错误 1、安装zeroMQ时  ./configure的时候出现    cannot link with -luuid, install uuid-dev 系统缺少相应的依赖包，可以用这个来安装，里面包括linux的一些util包，可以在这个中下载   2、storm执行文件时用python写的，启动./storm nimbus的时候，执行到co
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值