前言:
jubuntu 安装本地版storm并运行WordCount
1. 开始从apache下载的最新版1.0.3,本地安装没有问题,但是当执行example-wordcount的时候报错找不到主类,后来解压jar包发现,1.03里面没有wordcount,有一些其他的类,于是第二次去下载安装了一个早期版本0.9.6,成功执行。
2. 关于1.0.3和0.9.6的配置异同,可参考官方文档地址http://storm.apache.org/releases/1.0.3/Setting-up-a-Storm-cluster.html 和http://storm.apache.org/releases/0.9.6/Setting-up-a-Storm-cluster.html
3. 个人感觉在安装使用过程中,应尽量从官方文档以及FAQ等获取有用信息,否则自己容易进入一些误区。
4. 这是一个简易的本地版,供浏览学习之用,如有不妥之处,欢迎指正。
正文:
- 安装一个或多个可用的zookeeper(Set up a Zookeeper cluster )
可参考之前博客ubuntu 16.04安装zookeeper - 本地版或集群版都需要如下依赖( Install dependencies on Nimbus and worker machines )
1.0.3版本
Java 7
Python 2.6.6
0.9.6版本
Java 6
Python 2.6.6
注:Python在ubuntu以及其他Linux中默认已安装,jdk的安装这里不再赘述 - 从apache官网下载storm并解压到任意位置(Download and extract a Storm release to Nimbus and worker machines),并加入path环境变量
官方下载地址http://storm.apache.org/downloads.html 打开解压后的storm,编辑conf下的storm.yaml
1.0.3版本storm.zookeeper.servers: - "127.0.0.1" nimbus.seeds: ["127.0.0.1"]0.9.6版本storm.zookeeper.servers: - "127.0.0.1" nimbus.host: "127.0.0.1"配置zookeeper和主控节点host
运行主控节点nimbus和工作节点Supervisor
执行bin目录下可storm
Nimbus: Run the command “bin/storm nimbus” under supervision on the master machine.
Supervisor: Run the command “bin/storm supervisor” under supervision on each worker machine. The supervisor daemon is responsible for starting and stopping worker processes on that machine.bin/storm nimbus正确响应如下
...ib/ring-jetty-adapter-0.3.11.jar:/usr/dev_sda_7/local/apache-storm-0.9.6/lib/minlog-1.2.

本文档介绍了如何在Ubuntu上安装本地版的Storm 0.9.6,以及如何解决1.0.3版本找不到主类的问题。通过详细步骤演示了安装依赖、配置storm.yaml、启动nimbus和supervisor,以及执行WordCount示例的过程,为初学者提供了参考。
最低0.47元/天 解锁文章
1724

被折叠的 条评论
为什么被折叠?



