
Hadoop
文章平均质量分 82
_胡杨_
不想秃头!感谢大家的关注!
展开
-
3.Hadoop Hive服务
接上文—————> 搭建Hive环境一.hive 安装/配置二.hive 安装/配置 一.hive 安装/配置 1.解压下面压缩包 tar -xzvf apache-hive-2.1.1-bin.tar.gz 2.重命名 mv apache-hive-2.1.1-bin hive 3.配置环境变量 进入文件: vi /etc/profile 填入环境变量(注意修改hive位置): #HIVE export HIVE_HOME=/root/soft/h原创 2022-04-27 08:22:25 · 2459 阅读 · 0 评论 -
8. Hadoop Hbase服务
hadoop hbase操作原创 2022-06-02 17:56:40 · 362 阅读 · 0 评论 -
7.Hadoop ZooKeeper服务
zookeeper操作原创 2022-06-01 22:38:33 · 276 阅读 · 0 评论 -
6.Hadoop IDEA API操作
接上文————> 基于hadoop2.7.x centos7.x 目录:一.API操作配置1.给idea项目添加hadoop中的jar包2.导入jar包二.Io操作(上传/下载)1.上传2.下载三.其他操作1.获取文件系统2.创建目录3.删除目录4.更改文件名5.查看文件内容6.判断是文件还是目录 一.API操作配置 项目结构: 1.给idea项目添加hadoop中的jar包 jar包点击下载 2.导入jar包 选择hadoop安装包share下的整个hadoop包里面的jar文件全部导入 将原创 2022-05-31 22:45:59 · 1245 阅读 · 0 评论 -
5.Hadoop Linux命令行操作
接上文————> 1.查看可执行参数: hadoop fs 2.查看hdfs目录: hadoop fs -ls / 3.创建目录: hadoop fs -mkdir /tmp/userzrt hadoop fs -ls /tmp/ 查看 4.-copyFromLocal:复制本地文件系统到HDFS: 创建一个TXT文件 vi 1.txt 将opt下的1.txt复制到刚才创建的/tmp/userzrt中-- hadoop fs -copyFromLocal /opt/1.txt /tmp/us原创 2022-05-30 18:09:07 · 846 阅读 · 0 评论 -
4.Hadoop HBFS连接IDEA
接上文————> 目录:一.新建项目,配置Maven二.下载插件:三.连接HDFS四.报错总结: 一.新建项目,配置Maven 安装Maven 看这里——>这里不在赘述 直接选择Maven---->next 二.下载插件: file->plugins->marketplace,搜索bigdata tools 下载完成重启即可!!! 三.连接HDFS 点击项目右侧,单击打卡刚才下载的插件,连接HDFS 四.报错总结: 报错:在 HADOOP_HOME 中找不到本机驱原创 2022-05-27 10:15:22 · 857 阅读 · 0 评论 -
2.Hadoop 配置伪分布式
接上文------> Hadoop配置伪分布式1.修改/root/soft/hadoop/etc/hadoop/core-site.xml2.修改/root/soft/hadoop/etc/hadoop/hdfs-site.xml3.修改/root/soft/hadoop/etc/hadoop/mapred-site.xml.template4.修改/root/soft/hadoop/etc/hadoop/yarn-site.xml5.启动Hadoop6.进行SSH连接7.其他命令 1.修改/root原创 2022-04-26 15:09:17 · 2433 阅读 · 0 评论 -
1.Hadoop Centos7.x安装Hadoop及Java 详细
Centos7.x安装Hadoop及Java 详细一.基础设置二.安装Java三.安装hadoop 一.基础设置 1.进入centos下的root…目录 2.创建目录: mkdir soft 3.上传文件: 4.关闭防火墙: systemctl stop firewalld 5.设置防火墙不开机自启: systemctl disable firewalld 二.安装Java 1.进入root账户下的soft目录执行以下安装命令: rpm -ivh jdk-8u91-linux-x64.rpm原创 2022-04-26 12:08:40 · 1239 阅读 · 2 评论