第一步肯定是搭建hadoop集群啦,我是采用VMwared的EXSI虚拟化系统,将实体服务器虚拟成多个主机。直接上图:
然后就搭建hadoop集群,关于hadoop集群配置,网上教程一大把。。。
第二步:开始程序设计,搭建web框架,开始开发基于hadoop的云端文件管理系统
项目架构如下:
运行界面如下:
可以自行添加文件夹,也可以点击已有的云端文件夹,查看该云端文件夹下的文件
包含上传、也可删除、下载文件等功能
PS:整体来说,hadoop提高了java API来方便程序员操作hdfs,大家有空可以亲测下,实在不错。
遇到的问题:
超过1M的文件上传比较慢,下载速度上百M都还可以。
欢迎大家前来交流。。。。
附图: