
hadoop
如此生活丶
这个作者很懒,什么都没留下…
展开
-
yarn指向了java
本地安装了java、hadoop和nodejs,并配置了环境变量,但是hadoop的bin目录下存在yarn命令,所以使用nodejs的yarn命令启动项目会出现找不到类,此时键入yarn -version也会显示java的版本。解决办法是使用yarnpkg,它等同于yarn。...原创 2021-12-04 11:03:44 · 267 阅读 · 0 评论 -
hadoop集群脚本
1、集群分发脚本#!/bin/bash#验证参数if(($#!=1))then echo 请输入要分发的单个文件! exit;fi#获取分发文件的绝对路径dirpath=$(cd `dirname $1`; pwd -P)filename=`basename $1`echo 要分发的文件的路径是:$dirpath/$filename#获取当前的用户名user=$(whoami)#循环执行rsync分发文件到集群的每条机器for((i=101;i原创 2021-02-13 07:52:07 · 117 阅读 · 0 评论 -
Hadoop运行环境搭建
分布式集群搭建步骤分析:1)安装JDK2)配置环境变量3)安装Hadoop4)配置环境变量5)配置集群6)单点启动7)配置ssh8)群起并测试集群1、安装JDK2、hadoop安装1)Hadoop下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-2.7.2/2)环境变量:##HADOOP_HOMEexport HADOOP_HOME=/opt/module/hadoop-2.7.2export PATH=$P原创 2021-02-10 00:52:29 · 218 阅读 · 0 评论