
hadoop
文章平均质量分 86
偶尔失联
加油~努力~奋斗
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hdoop之负载均衡
文章目录前言一、负载均衡1.数据平衡不能导致数据块减少,数据块备份丢失2.管理员可以中止数据平衡进程3.每次移动的数据量以及占用的网络资源,必须是可控的4.数据均衡过程,不能影响namenode的正常工作二、该数据均衡算法每次迭代的逻辑1.数据均衡服务(Rebalancing Server)首先要求 NameNode 生成 DataNode 数据分布分析报告,获取每个DataNode磁盘使用情况2 Rebalancing Server汇总需要移动的数据分布情况,计算具体数据块迁移路线图。数据块迁移路线图,.原创 2021-06-22 13:58:37 · 192 阅读 · 0 评论 -
基于Hadoop的Hdfs云盘系统
文章目录一、关于项目二、项目1.项目演示2.代码总结一、关于项目环境:centos7 Tomcat8.0 IDEAL MySQL hadoop 本云盘系统是基于Hadoop hdfs的集群分布式系统技术 :前端: html5+css3+vue后端: springboot+spring+jpa+spring security+验证码依赖管理: maven数据库:user表: uid uname upwd功能点:1.安全认证实现验证码功能,使用Sprin.原创 2021-06-10 18:31:43 · 3397 阅读 · 4 评论