- 博客(5)
- 收藏
- 关注
原创 11.hive DDL 操作
创建表: CREATE EXTERNAL TABLE person(id INT, name string,age int) row format delimited fields terminated by '\t' lines terminated by '\n' STORED AS TEXTFILE; 导入本地文件: load data local inpath '/hom...
2019-06-05 16:55:51
93
原创 04_mapreduce
1.运行mapreduce官方示例:bin/yarn jar /home/masterj/modules/hadoop-2.7.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount /input/ /output2/
2019-04-19 00:45:23
102
原创 03-HDFS操作
通过shell操作hdfs数据 1.查看目录: bin/hdfs dfs -ls / 2.创建目录:bin/hdfs dfs -mkdir /abc 递归层级创建文件夹:bin/hdfs dfs -mkdir -p /abc/def 3.上传文件到hdfs:bin/hdfs dfs -put ~/tmp/words.txt /abc/ ...
2019-04-17 23:37:12
156
原创 02-hadoop环境配置
1.关键配置文件内容 [masterj@linux1 hadoop]$ vi hadoop-env.sh [masterj@linux1 hadoop]$ vi yarn-env.sh [masterj@linux1 hadoop]$ vi mapred-env.sh [masterj@linux1 hadoop]$ vi core-site.xml [masterj@linux1 hadoop...
2019-04-12 00:55:00
140
原创 01-linux集群服务器基本配置(centos7下)
1.sudo命令配置 visudo root ALL=(ALL) ALL masterj ALL=(ALL) NOPASSWD:ALL (masterj用户被授权了所有命令,无需密码) 2.配置ip vi /etc/sysconfig/network-scripts/ifcfg-ens33 service network restart 3.配置主机名 ...
2019-04-11 00:28:25
170
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人