黄刚的技术博客

首先，在官网上下载安装包，本文采用的是apache-storm-0.9.5.zip。 放到指定机器上/usr/local 解压后编辑配置文件conf/storm.yaml： 然后修改环境变量： export STORM_HOME=/usr/local/apache-storm-0.9.5 export PATH=$STORM_HOME/bin:$PATH 然后需要把zookeep

原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://sofar.blog.51cto.com/353572/1579897 1、我的hosts配置 # vim /etc/hosts 1 2 3 4 5 6 7 8 9 10 11

设计目标        传统的离线计算会存在数据反馈不及时，很难保证很多急需实时数据做决策的场景。同时，如果各个业务方自己既负责开发实现各种实时计算程序，同时还需要维护一套实时计算软件环境，不仅效率低效，对公司的开发资源、硬件资源也是极大的浪费。所以为公司提供统一的实时计算平台，提升业务团队开发效率，满足公司各种精细化运营、监控等的要求，我们近期启动**实时计算平台的建设工作。

1、下载社区版本spark编译包，一般选择和cdh版本含的hadoop版本一致的社区编译版spark； 2、在某台服务器上解压spark安装包 3、将SPARK_HOME环境变量加入/etc/profile，然后执行 source /etc/profile使其生效； 4、删除软连接 /etc/alternatives/spark-submit， /etc/alternatives