大数据学习笔记二:Ubuntu/Debian 下安装大数据框架Hadoop

本文档详细记录了在Ubuntu/Debian系统下安装Hadoop的步骤,包括安装Java、创建Hadoop用户、下载并配置Hadoop、格式化NameNode、启动Hadoop集群以及访问集群的过程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >


大数据学习系列文章: 大数据-博客专栏


在学习极客时间专栏:《从0开始学大数据》,但专栏中介绍的都是粗略的理论知识,并没有实践。
Hadoop官网:Apache Hadoop

安装Java

Hadoop基于Java,需要先安装Java。
可以参考这篇文章:Linux: debian/ubuntu下安装和使用Java 11

sudo apt install default-jdk
-> # java --version
openjdk 11.0.4 2019-07-16
OpenJDK Runtime Environment (build 11.0.4+11-post-Ubuntu-1ubuntu218.04.3)
OpenJDK 64-Bit Server VM (build 11.0.4+11-post-Ubuntu-1ubuntu218.04.3, mixed mode, sharing)

为Hadoop创建用户

-> # adduser hadoop
Adding user `hadoop' ...
Adding new group `hadoop' (1001) ...
Adding new user `hadoop' (1001) with group `hadoop' ...
Creating home directory `/home/hadoop' ...
Copying files from `/etc/skel' ...
Enter new UNIX password: 
Retype new UNIX password: 
passwd: password updated successfully
Changing the user information for hadoop
Enter the new value, or press ENTER for the default

root@ubuntu [16:08:32] [/home/ubuntu] 
-> # su - hadoop 

hadoop@ubuntu:~$ ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
Generating public/private rsa key pair.
Created directory '/home/hadoop/.ssh'.
Your identification has been saved in /home/hadoop/.ssh/id_rsa.
Your public key has been saved in /home/hadoop/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:D7aK2tuZccJJCdNQrRbLqoMiTLTg2qsbzYQ89tOfvDs hadoop@ubuntu
The key's randomart image is:
+---[RSA 2048]----+
|    ....         |
|     o. .        |
|    o..+         |
|oo   o=.         |
|=+o  oo S        |
|.Bo oo o +       |
|=oo+ .= o 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值