在hadoop2.7.4中搭建apache-storm-1.1.1集群

408计算机复试专业课问答汇总 阅读详情

一、正确启动集群

1.启动hadoop集群

2、启动zookeep集群

二.启动storm集群

在master上启动nimbus,运行命令storm nimbus即可

在slave上启动supervisor,运行命令storm supervisor即可

三、配置错误

1.Caused by: java.lang.IllegalArgumentException: Field STORM_ZOOKEEPER_SERVERS must be an Iterable but was a class java.lang.String
at org.apache.storm.validation.ConfigValidationUtils$2.validateField(ConfigValidationUtils.java:125)
at org.apache.storm.validation.ConfigValidationUtils$NestableFieldValidator.validateField(ConfigValidationUtils.java:48)
at org.apache.storm.validation.ConfigValidation$ListEntryTypeValidator.validateField(ConfigValidation.java:304)
at org.apache.storm.validation.ConfigValidation$ListEntryTypeValidator.validateField(ConfigValidation.java:299)
at org.apache.storm.validation.ConfigValidation.validateField(ConfigValidation.java:640)
at org.apache.storm.validation.ConfigValidation.validateFields(ConfigValidation.java:675)
at org.apache.storm.validation.ConfigValidation.validateFields(ConfigValidation.java:654)
at org.apache.storm.config$validate_configs_with_schemas.invoke(config.clj:74)
at org.apache.storm.config$read_storm_config.invoke(config.clj:79)
at org.apache.storm.config$fn__908.invoke(config.clj:100)
at org.apache.storm.config__init.load(Unknown Source)
at org.apache.storm.config__init.<clinit>(Unknown Source)
... 35 more

2、Caused by: while parsing a block mapping
 in 'reader', line 18, column 1:
    storm.zookeeper.servers: 
    ^
expected <block end>, but found BlockMappingStart
 in 'reader', line 23, column 2:
     nimbus.seeds: ["172.16.169.10"]
     ^
Caused by: while scanning a simple key
 in 'reader', line 24, column 1:
    storm.local.dir:/usr/local/storm ... 
    ^
could not found expected ':'
 in 'reader', line 25, column 1:
    supervi
Caused by: java.lang.IllegalArgumentException: Field STORM_ZOOKEEPER_SERVERS must be an Iterable but was a class java.lang.String
at org.apache.storm.validation.ConfigValidationUtils$2.validateField(ConfigValidationUtils.java:125)
at org.apache.storm.validation.ConfigValidationUtils$NestableFieldValidator.validateField(ConfigValidationUtils.java:48)
at org.apache.storm.validation.ConfigValidation$ListEntryTypeValidator.validateField(ConfigValidation.java:304)
at org.apache.storm.validation.ConfigValidation$ListEntryTypeValidator.validateField(ConfigValidation.java:299)
at org.apache.storm.validation.ConfigValidation.validateField(ConfigValidation.java:640)
at org.apache.storm.validation.ConfigValidation.validateFields(ConfigValidation.java:675)
at org.apache.storm.validation.ConfigValidation.validateFields(ConfigValidation.java:654)
at org.apache.storm.config$validate_configs_with_schemas.invoke(config.clj:74)
at org.apache.storm.config$read_storm_config.invoke(config.clj:79)
at org.apache.storm.ui.core__init.load(Unknown Source)
at org.apache.storm.ui.core__init.<clinit>(Unknown Source)

上述两个错误都是由于在conf目录下的storm.yaml 的配置错误:缩进错误,下面的是正确的配置截图



CDR学习笔记——02 这篇写一些高级CDR的架构原理。 阅读详情

相关推荐

在mac OS下安装SQL Developer

最近一直在折腾Oracle数据库,但由于电脑是mac系统,plsql developer用不了,远程管理一直不是很方便。后来听说Navicat不错,就也装了个试试看,发现界面看起来确实不错。今天心血来潮,想试试oracle自己开发的client。用惯plsql developer的人也可以来试试看,毕竟是自己人开发的,兼容性应该会不错吧。下面就把安装过程分享给新手或者需要帮助的朋友。 1.

bonbonboo的专栏 2万+

如何解决 Java 中的 IllegalArgumentException 异常?

非法参数异常(IllegalArgumentException)的抛出是为了表明一个方法被传递了一个非法参数。该异常扩展了 RuntimeException 类,因此属于在 Java 虚拟机(JVM)运行期间可能抛出的异常。它是一种未检查异常,因此不需要在方法或构造函数的 throws 子句中声明。

SEO_juper的博客 8300

深入解析组合逻辑环(combinational loop)的成因与解决方案

本文深入解析了数字电路设计中组合逻辑环(combinational loop)的成因与危害。通过边沿检测和中断轮询(round_robin)仲裁器等实例,揭示了代码如何意外形成环路,并对比了插入触发器、重构逻辑以及状态机思维三种核心解决方案,帮助硬件工程师从根本上避免这一常见设计陷阱,确保电路稳定可靠。

weixin_28278377的博客 313

Field NIMBUS_SEEDS must be an Iterable but was a class java.lang.String

通过storm nimbus启动单机storm时,报了如题错误。 解决办法的参考文章:https://www.mail-archive.com/dev@storm.apache.org/msg44929.html

zhunode的探索 533

MATLAB并行开不了的解决办法

在服务器上新安装了MATLAB 2013b,在开并行计算的时候出现了下列问题 经过在网上搜多这个问题,我感觉这个问题应该是安装的时候的验证问题或者激活不成功之类的。注意其中有一句validate the profile ‘local’ in the Cluster Profile Manager.在matlab官网上找到了设置Cluster Manager的教程,如下 parallel>

sinat_36713319的博客 5987

HFSS仿真的后处理结果,如何根据天线表面的电流密度分布对天线进行优化?

在HFSS仿真中,天线表面的Jsurf​是最直观、最有价值的诊断工具之一。它不仅告诉你天线“能不能工作”,还能告诉你“为什么工作”以及“哪里出了问题”。

degogmy的博客 1156

storm 启动报错

storm安装包:apache-storm-1.0.3.tar.gz 解压命令:tar -zxvf apache-storm-1.0.3.tar.gz -C ~/training/配置环境变量:vi ~/.bash_profileSTORM_HOME=/root/training/apache-storm-1.0.3 export STORM_HOME PATH=$STORM_HOME/bin:...

Jantelope的博客 1873

基于Python的海关进出口数据爬取与贸易关系分析

本文介绍了如何使用Python爬虫技术获取海关进出口数据,并基于这些数据进行贸易关系分析。文章详细阐述了数据采集、清洗、存储和分析的全过程,使用了最新的爬虫技术和数据分析方法,为国际贸易研究提供数据支持和技术参考。关键词:Python爬虫、海关数据、贸易分析、数据可视化、Selenium、Scrapy。

2201_76125261的博客 543

springboot项目启动类报Caused by: java.lang.IllegalArgumentException问题解决方案

springboot项目启动类报错记录springboot项目启动类报Caused by: java.lang.IllegalArgumentException问题解决方案 springboot项目启动类报Caused by: java.lang.IllegalArgumentException问题解决方案 具体错误展示内容如下: "C:\Program Files\Java\jdk1.8.0_131\bin\java.exe" -XX:TieredStopAtLevel=1 -noverify -Dspr

月亮投递员的博客 3万+

高通SDX35:SGMII接口PHY RTL8211FSI-CG驱动适配

高通SDX35 RTL8211F SGMII

不秃头的程序猿Gabriel的博客 785

勇闯dify v1.0.0之设置模型供应商。解决:Reached maximum retries (3) for URL https://marketplace.dify.ai/

朋友们,大家好,今天带大家来勇闯dify v1.0.0。为什么叫勇闯呢?我就这么说吧,本来我昨天就想带大家勇闯v1.0.0的。但是dify的marketplace访问不了。公司的网和手机热点都试了,就是访问不了。我们连个模型都没有,还勇闯个球啊,对吧,就搁置了。今天,我赶紧看看这个marketplace好了没。一看,可以了。赶紧写下这篇博客,帮助同志们走出困境。

xiezhipu的博客 4616

zookeeper+storm安装配置

做大数据,想学习一下storm,试着在虚拟机上配置一个环境,现将具体安装过程及遇到的问题记录一下。前提已经安装并配置好了虚拟机,比如virtualbox + centos 7,并且JDK也安装并配置好,如果这个前提没有,请耐心的学习完成,可以网搜一些教程,也可以看我之前的博客。首先,下载zookeeper和storm软件,zookeeper-3.4.10-tar.gz,下载地址:http://zo

yongge1981的专栏 4970

5.2.4_标志位的生成

计算机组成原理之标志位的生成

人生得意须尽欢 7581

Apache Storm 2.x集群部署

storm简介 Storm 是一个开源的分布式实时计算框架,可以以简单、可靠的方式进行大数据流的处理。通常用于实时分析,在线机器学习、持续计算、分布式 RPC、ETL 等场景。Apache Storm 的前身是Twitter Storm平台,采用Clojure开发,目前已经归于 Apache 基金会管辖。 Storm集群环境搭建 参考:https://storm.apache.org/releases/2.2.0/Setting-up-a-Storm-cluster.html 这里搭建一个 3 节点的 S

IT 761

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

Apache Storm入门介绍之三分钟看懂Apache Storm

Apache Storm 入门介绍。Storm 是一个分布式实时大数据处理系统。Storm 旨在以容错和水平可扩展的方法处理大量数据。它是一个流数据框架,具有最高摄取率的能力。虽然 Storm 是无状态的,但它通过 Apache ZooKeeper 管理分布式环境和集群状态。它很简单,您可以对实时数据并行执行各种操作。

日拱一卒无有尽,功不唐捐终入海 5015

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

Centos 7 环境 Storm 2.0.0 完全分布式集群的搭建过程

系列博客地址 Centos 7 环境 hadoop 3.2.0 完全分布式集群搭建 Centos 7 环境hive3.1.1 搭建 Centos 7 环境Spark 2.4.3 完全分布式集群的搭建过程 Centos 7 环境HBase 2.1.5 完全分布式集群的搭建过程 Centos 7 环境 Storm 2.0.0 完全分布式集群的搭建过程 一 搭建Zookeepe...

jackhu专栏 937

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

Apache Storm简介及安装

一、环境准备 3台虚拟机 ○ 主机名分别是:L0, L2, L3 ○ 操作系统:CentOS 6.7 ○ 已经装有JDK 7 ○ 已经装有 zookeeper-3.4.10 apache-storm-0.9.6.tar.gz 二、Storm简介      Apache Storm是一个免费开源、分布式、高容错的实时计算系统。Storm令持续不...

东语的专栏 5517

linux下storm集群配置,Storm 1.2.2 集群 安装手册

1 搭建Hadoop 集群环境Storm的运行依赖与HDFS和Zookeeper,关于这2个组件的安装和配置参考如下博客:2 安装Storm集群2.1 下载Storm直接从官方下载:2.2 解压缩文件[dave@www.cndba.cn ~]$ tar xzvf apache-storm-1.2.2.tar.gz[dave@www.cndba.cn ~]$ mv apache-storm-1.2....

weixin_39562338的博客 217

storm java 使用集群_Storm 系列(四)—— Storm集群环境搭建

一、集群规划这里搭建一个 3 节点的 Storm 集群:三台主机上均部署 Supervisor 和 LogViewer 服务。同时为了保证高可用,除了在 hadoop001 上部署主 Nimbus 服务外,还在 hadoop002 上部署备用的 Nimbus 服务。Nimbus 服务由 Zookeeper 集群进行协调管理,如果主 Nimbus 不可用,则备用 Nimbus 会成为新的主 Nimb...

weixin_29002209的博客 199

storm集群搭建及numbus,supervisor启动异常

1.安装 (1)下载 wget https://archive.apache.org/dist/storm/apache-storm-1.1.2/apache-storm-1.1.2.tar.gz (2)创建文件夹 mkdir -p /export/server (3)解压 tar -zxvf apache-storm-1.1.2.tar.gz -C /export/server (4)重命名 ...

dfnkd的博客 1029

Hadoop、Spark、Storm相关组件安装

Hadoop2.6.4、zookeeper3.4.6、HBase1.2.2、Hive1.2.1、sqoop1.99.7、spark1.6.2安装

梓纾的专栏 4406

Storm-1.1.3的安装

环境 centos7 zookeeper-3.4.10 storm-1.1.3 master节点 nimbus node1,2,3节点 supervisor 安装storm之前必须安装zookeeper 安装步骤 1、下载并解压 下载网址 https://mirrors.tuna.tsinghua.edu.cn/apache/storm/apache...

孙大圣的博客 1185

Storm集群安装部署1——准备版

目录 一、部署环境准备 二、部署Storm集群 2.1 搭建ZooKeeper集群 2.1.1、搭建环境 文章中的所有内容不明白的可以查看前后文或者call博主; 相关文章: Storm集群安装部署1——准备版 Storm集群安装部署2——Centos6.5的默认python2.6.6版本升级到python2.7.15 Storm集群安装部署3——在节点服务器上安装 St...

小宫主的博客 574

Storm学习记录(三、Storm集群搭建)

一、单机搭建 1.上传并解压jar包 2.在storm目录下创建logs目录,以保存程序运行时的信息 mkdir logs 3.在bin目录下执行命令,启动zookeeper ./storm dev-zookeeper &gt;&gt; ../logs/dev-zookeeper.out 2&gt;&amp;1 &amp; 4.启动nimbus ./storm nimbus &...

在知识的海洋中遨游 209

storm集群操作指南

storm集群操作指南@(STORM)[storm, 大数据]storm集群操作指南 一storm伪分布式安装 一环境准备 二安装zookeeper 三安装storm 四运行程序 二storm集群安装 一下载storm并解压 二配置storm在stormyaml中添加以下内容 三关于包依赖的关系 四文件同步 五启动storm 六验证 三storm集群的启停 一命令模式 二supervisor模式 四

jediael_lu的专栏 2610

Storm集群的搭建

storm的环境和hadoop的环境没有任何关系 1、安装Zookeeper集群 2、解压storm 3、修改文件conf/storm.yaml 3.1、配置zookeeper服务器 storm.zookeeper.servers: - "hadoop112" - "hadoop113" - "hadoop114" 3.2、配置...

dianhuopao7502的博客 103
上一篇: centos 7安装zeromq,jzmq
下一篇: R语言paste函数解析
Intelligebce
博客等级 码龄10年 21粉丝 58原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值