
BigData
tuzhg
这个作者很懒,什么都没留下…
展开
-
BigData Learning day 1 hadoop生态系统
Data Managment: Oozle、Chukwa、Flume、zookeeperData Access:Hive、Pig、Mahout、Avto、SqoopData Processing: MapReduce、YARNData Storage: HDFS、HBASEHive包括的四种数据类型:表(table)、外部表(External Table)、分区(partition...原创 2018-11-26 16:13:54 · 283 阅读 · 1 评论 -
BigData Learning day 3 hadoop伪分布式系统安装
--------------------------------Day 2 linux安装---------------------------配置好jdk环境变量,hadoop环境变量在终端输入java -version 和hadoop version查看jdk和hadoop版本hadoop伪分布式安装cd ~ssh-keygen -t rsa将生成的公钥信息保存...原创 2018-11-29 21:09:54 · 217 阅读 · 0 评论 -
BigData Learning day 5 hadoop hive环境搭建
参考实验楼里面很详细https://www.shiyanlou.com/courses/38/labs/766/document配置hive-site.xm的时候可以把他移动到/home/Code文件夹中然后下载下来直接移动到$HIVE_HOME/conf中配置好所有东西后schematool -dbType mysql -initSchema查看是否初始化成功,如果不能报...原创 2018-12-02 16:58:04 · 2893 阅读 · 0 评论 -
hive数据导入的六种方式
1、加载本地文件到hive表中: load data local inpath '/home/tuzhigang/test.txt' into test_table;2、加载HDFS文件到hive表中: load data inpath 'path/test.txt' into test_table3、加载数据覆盖表中已有的数据: load data local inpath '/hom...原创 2018-12-16 14:35:08 · 5737 阅读 · 0 评论