前几天在知网上翻了好多论文,昨天开始一篇一篇地看,由于有的论文时间比较早,甚至是3年前的,所以很多部分只是对当前的技术有一个展望和综述,不过这样对我这种初学者也有好处,今天看得这篇文章是李金亮,翟永刚,汤向东发表的一篇题为《基于Hadoop和Openstack云存储的研究》的论文,以下为一些记录和感想。
1.HDFS 和Swift 优缺点
HDFS 虽然有着许多优点,但也存在着一些缺点。
首先,HDFS 是用来处理大吞吐量的离线数据,它需要牺牲一定的延时为代价,因此它不太适合哪些对延时有较高要求的应用程序。
其次,HDFS 被设计用来处理大数据文件,它通常对大文件进行优化,而在处理大量小文件时反而会使其耗费更多内存,从而影响数据处理的效率。此外,HDFS 中一次只能写入一个文件,不支持多用户并发写入。
相反,Swift 用来存储多个任意大小文件的数据,而且支持对文件多用户并发写入,但Swift 没有目录结构,不支持嵌套,也不支持文件的重写,只能新建,不支持服务器