
Hadoop
文章平均质量分 73
小马也是行动派
这个作者很懒,什么都没留下…
展开
-
Hadoop中RPC框架实现机制
本文章为学习后的总结,如果有错误,请各位及时帮我指正,感谢。RPC 远程过程调用,是两个进程之间的调用。用于微服务之间通信。在单体架构的时候,我们的Controller和Service 在同一个主机部署,当我要使用Service的时候我直接new 一个Service的实例,然后用 实例调用内部的方法,但是如果把Service抽取成微服务,则这些服务会跟Controller层部署在不同的主机上。这就导致我们原来直接new 实例不能这么做了。因为找不到Service的实现了。通过RPC可以间接帮你.原创 2020-06-21 15:14:42 · 309 阅读 · 0 评论 -
HDFS 工作原理图解 如何实现高可用
该文章的图都是根据自己理解画的 如有不对的地方 请大家指正 谢谢HDFS 是一个分布式的集群 能够满足大量文件的上传与访问,但是namenode 为了实现快速的相应客户端的请求 存储在namenode上的源数据 存在什么地方呢?目前能想到的是存在内存中。但是存在内存中如果namenode关机了 或者 宕机了 那源数据不就没有了么?也没办法恢复了,那集群就不能用了 datenode上的数据也没办法访问了。那就在磁盘同步一份数据。那怎么保证磁盘跟内存中的数据一致性呢?HDF...原创 2020-06-13 14:07:53 · 532 阅读 · 0 评论 -
Centos7安装Hadoop集群版
上次安装了Hadoop单机版练习了一下Centos7安装Hadoop单机版这里就开始安装Hadoop集群版原创 2019-12-26 22:04:42 · 299 阅读 · 0 评论 -
Centos7安装Hadoop单机版
先安装个单机版练习一下,然后在动手搭建集群版。Centos7安装Hadoop集群版1.原创 2019-12-26 22:05:29 · 448 阅读 · 0 评论 -
Hadoop文件系统操作指令
待写原创 2020-05-24 18:53:06 · 1987 阅读 · 0 评论 -
Hadoop中hdfs如何存储文件
安装Hadoop单机版从安装Hadoop 单机版的配置说起在这里配置了Hadoop的文件目录1. 启动Hadoop 并上传文件 上传文件命令:hadoop fs -put hadoop-2.9.2.tar.gz hdfs://hdgroup01:9000/ 可以看到已经上传了文件了2. 删除本地文件如果删除后你在浏览器刷新页面 然后还能下载 说明 肯定存在其他地方使用命令下载也可以:hadoop fs -get hdfs://...原创 2020-05-23 17:08:25 · 3191 阅读 · 0 评论 -
Hadoop集群配置无密登录
待写原创 2020-05-23 17:11:44 · 273 阅读 · 0 评论