
Hadoop
njchenyi
这个作者很懒,什么都没留下…
展开
-
初学Hadoop--1
创建目录hadoop dfs -mkdir 目录名(dfs也可以用fs代替) 列取目录hadoop dfs -ls .(当前目录)hadoop dfs -ls 目录名 从本地文件系统复制文件到DFShadoop dfs -copyFromLocal 源文件 目标文件源文件默认从当前目录中读取,如果目标文件是相对路径则是保存在DFS的/user/root/目录下原创 2010-01-19 15:33:00 · 3922 阅读 · 1 评论 -
The Hadoop Distributed File System
<br />3. The Hadoop Distributed File System <br />3.1. The Design of HDFS <br />HDFS设计的针对对象:适合流式访问的超大文件、在使用便宜的硬件搭建的集群上运行。 <br />HDFS不足: <br />低延迟数据访问(Hbase是个好选择)、小文件多的时候出现问题(HDFS将文件Meta信息存储在内存中,内存限制了可以控制的文件数量)、对文件的多个wirter进行写入或者任意位置的修改。 <br />3.2. HDFS Con转载 2010-08-24 11:51:00 · 5434 阅读 · 1 评论