大数据之路
文章平均质量分 70
大数据相关的学习笔记内容
DeepOps
MAKE YOUR LIFE A STORY WORTH TELLING
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
DeepOps的hadoop小笔记-Hadoop 与 Java JDK 的版本选择
详细内容参考网址:https://cwiki.apache.org/confluence/display/HADOOP/Hadoop+Java+VersionsApache Hadoop 3.3 and upper supports Java 8 and Java 11 (runtime only)Please compile Hadoop with Java 8. Compiling Hadoop with Java 11 is not supported: HADOOP-16795 - Ja原创 2021-03-08 17:21:45 · 514 阅读 · 0 评论 -
DeepOps的hadoop小笔记-HIVE安装ubuntu+virtualbox
00 前期准备1、已部署好hadoop集群2、已部署java环境3、已经安装好mysql01 下载hive安装文件https://hive.apache.org/downloads.html02 修改配置文件hive-env.sh.template名称为hive-env.sh,一些hive的环境变量内容可以在里面设置。系统用户环境变量中增加:export HADOOP_HOME=<hadoop-install-dir>export HIVE_HOME=<hive-ins原创 2021-02-26 09:30:12 · 272 阅读 · 0 评论 -
DeepOps的hadoop小笔记-hadoop集群搭建ubuntu+virtualbox
00 前期准备1、已部署hadoop2、已部署java环境01 主要介绍hdfsnamenode nndatanode dnsecondary namenode 2nnyarnResourceManager rmNodeManager nmApplicationMaster AMContainerMapReduceMapReduce02 各项环境信息服务器情况服务器名称服务器ipHDFS服务YARN 服务说明03 创建虚拟机设置s原创 2021-02-16 16:11:26 · 307 阅读 · 0 评论 -
DeepOps的hadoop小笔记-ubuntu18.4 LTS 环境下搭建 hadoop
中文官方参考文档链接:http://hadoop.apache.org/docs/r1.0.4/cn/quickstart.html检查环境变量与依赖下载安装包下载相应的软件解压安装包解压软件并建立相应目录4...原创 2018-12-21 15:52:56 · 242 阅读 · 0 评论 -
ubuntu18.4 LTS 环境下搭建 hive
官方参考文档GettingStartedhttps://cwiki.apache.org/confluence/display/Hive/GettingStarted1.依赖与版本java:Hive 1.2版本及以上 jdk1.7 或更高Hive 0.14~1.1 使用jdk1.6我机器jdk现在是1.9hadoop:推荐hadoop 2.xhive2.0 以上版本不支持 h...原创 2018-12-21 16:22:32 · 301 阅读 · 0 评论
分享