HDFS读数据流程

最新推荐文章于 2024-06-24 22:53:05 发布

RedSnipers

最新推荐文章于 2024-06-24 22:53:05 发布

阅读量221

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.youkuaiyun.com/RedSnipers/article/details/107870719

HDFS读数据流程

在这里插入图片描述
1）客户端向namenode请求下载文件，namenode通过查询元数据，找到文件块所在的datanode地址。
2）挑选一台datanode（就近原则，然后随机）服务器，请求读取数据。
3）datanode开始传输数据给客户端（从磁盘里面读取数据放入流，以packet为单位来做校验）。
4）客户端以packet为单位接收，先在本地缓存，然后写入目标文件。