
大数据
大数据相关组件学习
李同学va
这个作者很懒,什么都没留下…
展开
-
beeline连接hiveserver2 踩坑2小时!!
beeline连接hiveserver2的经历首先安装好hive之后启动hiveserver2服务[hadoop@localhost apache-hive-2.3.6-bin]$ hiveserver2 which: no hbase in (/home/hadoop/app/jdk1.8.0_201/bin:/home/hadoop/app/jdk1.8.0_201/jre/bin:...原创 2020-02-27 18:38:11 · 3073 阅读 · 5 评论 -
Azkaban 安装部署 踩坑!!!! 解决方案
1.部署环境Centos7hadoop伪分布式环境MySQL 5.72. 相关软件azkaban-db-0.1.0-SNAPSHOTazkaban-exec-server-0.1.0-SNAPSHOTazkaban-web-server-0.1.0-SNAPSHOT3.解压 azkaban-db-0.1.0-SNAPSHOT解压并移动到指定目录下tar -zxvf ...原创 2020-03-09 13:11:53 · 371 阅读 · 0 评论 -
hadoop基础知识点学习-2
1. YARN部署参考官方文档:https://hadoop.apache.org/docs/r2.10.0/hadoop-project-dist/hadoop-common/SingleCluster.html1.1 配置 etc/hadoop/mapred-site.xml <configuration> <property> <name>mapreduce.framework.name</name> <val原创 2020-05-10 12:13:04 · 271 阅读 · 0 评论 -
hadoop基础知识点学习-1
1. hadoop介绍广义: 以Apache hadoop 软件为主的生态圈 也包含 hive sqoop hbase kafka spark flink狭义: 以Apache hadoop 软件以Apache hadoop 软件 如今主流为2.x版本 hadoop2.x有三大组件分别为hdfs、mapreduce、yarn。 分别负责数据存储、计算(作业)、以及资源和作业的调度。 大数据平台:存储数据作为第一位,存储和计算是相辅相成的。hadoop官网地址htt原创 2020-05-10 12:12:21 · 198 阅读 · 0 评论