ubuntu 安装本地版storm并运行WordCount

本文档介绍了如何在Ubuntu上安装本地版的Storm 0.9.6,以及如何解决1.0.3版本找不到主类的问题。通过详细步骤演示了安装依赖、配置storm.yaml、启动nimbus和supervisor,以及执行WordCount示例的过程,为初学者提供了参考。

前言:

jubuntu 安装本地版storm并运行WordCount
1. 开始从apache下载的最新版1.0.3,本地安装没有问题,但是当执行example-wordcount的时候报错找不到主类,后来解压jar包发现,1.03里面没有wordcount,有一些其他的类,于是第二次去下载安装了一个早期版本0.9.6,成功执行。
2. 关于1.0.3和0.9.6的配置异同,可参考官方文档地址http://storm.apache.org/releases/1.0.3/Setting-up-a-Storm-cluster.htmlhttp://storm.apache.org/releases/0.9.6/Setting-up-a-Storm-cluster.html
3. 个人感觉在安装使用过程中,应尽量从官方文档以及FAQ等获取有用信息,否则自己容易进入一些误区。
4. 这是一个简易的本地版,供浏览学习之用,如有不妥之处,欢迎指正。

正文:

  1. 安装一个或多个可用的zookeeper(Set up a Zookeeper cluster )
    可参考之前博客ubuntu 16.04安装zookeeper
  2. 本地版或集群版都需要如下依赖( Install dependencies on Nimbus and worker machines )
    1.0.3版本
    Java 7
    Python 2.6.6
    0.9.6版本
    Java 6
    Python 2.6.6
    注:Python在ubuntu以及其他Linux中默认已安装,jdk的安装这里不再赘述
  3. 从apache官网下载storm并解压到任意位置(Download and extract a Storm release to Nimbus and worker machines),并加入path环境变量
    官方下载地址http://storm.apache.org/downloads.html
  4. 打开解压后的storm,编辑conf下的storm.yaml
    1.0.3版本

    storm.zookeeper.servers:
         - "127.0.0.1"
    nimbus.seeds: ["127.0.0.1"]
    0.9.6版本
    
    storm.zookeeper.servers:
         - "127.0.0.1"
    nimbus.host: "127.0.0.1"

    配置zookeeper和主控节点host

  5. 运行主控节点nimbus和工作节点Supervisor
    执行bin目录下可storm
    Nimbus: Run the command “bin/storm nimbus” under supervision on the master machine.
    Supervisor: Run the command “bin/storm supervisor” under supervision on each worker machine. The supervisor daemon is responsible for starting and stopping worker processes on that machine.

    bin/storm nimbus

    正确响应如下

    ...ib/ring-jetty-adapter-0.3.11.jar:/usr/dev_sda_7/local/apache-storm-0.9.6/lib/minlog-1.2.
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值