Hdoop的原理

hadoop是什么?

海量数据的存储(HDFS)

海量数据的分析(MapReduce)

资源管理调度(YARN)

hadoop核心

HDFS: Hadoop Distributed File System 分布式文件系统

YARN: Yet Another Resource Negotiator 资源管理调度系统

HDFS的架构

主从结构

主节点,只有一个: namenode

从节点,有很多个: datanode

namenode负责: 接收用户操作请求

维护文件系统的目录结构

管理文件与block之间关系,block与datanode之间关系

datanode负责:

存储文件

文件被分成block存储在磁盘上

为保证数据安全,文件会有多个副本

ssh服务(重点)

ssh(secureshell,安全外壳协议),该协议有2个常用的作用:远程连接协议、远程文件传输协议。

协议使用端口号:默认是22

可以是被修改的,如果需要修改,则需要修改ssh服务的配置文件:

#/etc/ssh/ssh_confi

端口号可以修改,但是得注意2个事项:

a.注意范围,端口范围是从0-65535;

b.不能使用别的服务已经占用的端口:

服务启动/停止/重启

#servicesshdstart/stop/restart

#/etc/init.d/sshdstart/stop/restart

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值