twitter storm 常见错误-持续更新

本文介绍了Storm在使用过程中常见的几个问题及其解决方案,包括UI访问错误、supervisor启动失败、UUID-dev安装问题、本地提交topology失败及长时间运行内存溢出等问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1:storm ui上不去,500错误,在ui.log里面是一个TTransportException
访问一次就会有一次的错误日志
2012-03-06 11:21:46 log [WARN] /

org.apache.thrift7.transport.TTransportException

原因:

访问一个不存在的topo就会出错,把data目录清空了就OK了

2:安装后supervisor名称相同,且supervisor启动失败

此处一定要修改每台机器的hostname与之相对应,因为supervisor.clj里面有行代码local-state (supervisor-state conf)
该代码在启动supervisor的时候会找本机的hostname ,hostname配置不正确会导致supervisor启动失败

3:安装uuid-dev失败

注意在安装uuid-dev的时候不同系统安装的名称不一样,使用centeros的同学需要安装yum install libuuid-devel,ubuntu的同学可以直接安装apt-get install uuid-dev

4:不能在本地将topology的的jar包提交到storm集群

~/.storm/目录新建storm.yaml文件,~代表用户主目录。storm.yaml文件内容:nimbus.host: "192.168.1.205"。

export PATH=$PATH:*/storm-0.7.0-rc/bin

5:使用storm0.7之前的版本时间长了会出现outofmemory

0.7之前的版本每发射一个tuple会创建一个hashmap存放该tuple所在的消息树的结构,时间久了会给gc造成很大压力,甚至会outofmemory


评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值