
大数据学习笔记
文章平均质量分 71
文艺圈不知名刘先生
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
windows搭建hadoop环境
前言之前虽然在wsl和docker上都搭建了hadoop的环境,但由于需要本地的代码调试,不得以而再次搭建windows平台的运行环境。文章目录前言下载拷贝dll文件配置环境变量配置JAVA_HOME配置HADOOP_HOME配置PATH检验伪分布式配置修改hadoop-env.cmd修改hdfs-site.xml检验下载首先下载我们需要的hadoop文件(这里的bin 和etc文件已经替换过,配置后直接使用即可):下载地址提取码:owtg强调:将该文件解压到一个没有中文与空格的路径下原创 2021-04-10 03:10:34 · 629 阅读 · 0 评论 -
使用docker搭建大数据环境
文章目录Instruction使用方法clone本仓库到你的本地使用make进行docker镜像下载启动镜像进入镜像退出并解除容器Instruction使用docker进行构建单机伪分布式hadoop环境,搭建的docker-images使用的软件版本如下:hadoop版本:2.7.7spark版本:3.1.1jdk版本:1.8hive版本:待添加Hbase版本:1.4.13ps:1. 请先确保你的 git 、docker 和 make 是可用的。2. 镜像内的用户密码.原创 2021-04-10 01:16:42 · 931 阅读 · 0 评论