自定义博客皮肤VIP专享

*博客头图：

点击选择上传的图片

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

点击选择上传的图片

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

点击选择上传的图片

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览取消提交

自定义博客皮肤

-+

上一步保存

张贵宾的技术专栏

专注于云计算相关技术的研究

博客等级

码龄23年

13
原创

15
点赞

17
收藏

45
粉丝

关注

私信

热门文章

分类专栏

Scala 19篇
Java 11篇
Hadoop 3篇
Pig 2篇
HBase 1篇
Oozie 1篇
QuickFix/J 4篇
GIT 3篇
maven 1篇
AMQP 1篇
Erlang 3篇
MAC 2篇
AVRO 3篇
AioTrade 4篇
Android 1篇

最新评论

HDFS Federation(HDFS 联盟)介绍
草塘阳光: 你好，我想问下block pools之间的数据共享是怎么做到的，比如client通过NS1 创建了一个文件/ns1/a.txt,然后NS1停掉。 client此时如何再去操作/ns1/a.txt文件？
Actors in Scala（Scala中的Actor）(预打印版) 第五章 Event-Based Programming (A)
nashwill: def waitFor(n: Int): Unit = if(n > 0) { react { case 'Die => val from = sender if(next != null) { next ! 'Die react { case 'Ack => from ! 'Ack; waitFor(n - 1) } } else {from ! 'Ack; waitFor(n - 1)} } } 这段代码有问题吧，我用的是2.10
什么时候才应该使用HBase？
developerinit: good
深度分析如何在Hadoop中控制Map的数量
developerinit: good,1楼你说的小文件是放在多个block的
深度分析如何在Hadoop中控制Map的数量
felxfangxiaoyu: 非常透彻的文章，多谢指教了。我对hadoop尚在入门阶段，有个问题还望博主赐教：我在看《hadoop权威指南》时，里面说"HDFS中小于一个块大小的文件不会占据整个块的空间"(43页)("a file in HDFS that is smaller than a single block does not occupy a full block’s worth of underlying storage")。那如果块大小为64M，文件大多只有5M，是不是意味着剩余的59M可以存放别的文件呢？但如果这种假设成立的话，那么“大数量的小文件”应该就不会导致过多的Mapper了，因为block里存放多个文件的话，最终mapper数还是由block数来决定。这让我很困惑。多谢解答 :)

AVRO

关注

关注数：文章数：3 文章阅读量：1448 文章收藏量：1

作者: Guibin

这个作者很懒，什么都没留下…

展开

专栏收录文章