
Hadoop HBase
Vitas
这个作者很懒,什么都没留下…
展开
-
Import data to HBase
There have 3 common usages to import data to HBase:1>Use ImportTsvImportTsv is a utility that will load data in TSV format into HBase.There have two usages about it:a.Loading data from TS...2013-08-20 17:30:18 · 132 阅读 · 0 评论 -
MapReduce 扫盲
随着数据量的增大,想要在可接受的时间内完成一定量的计算,不断地更新硬件系统已经成为很多企业的负担。但同时通过成百上千的普通pc 机实现并行计算,又有很多难点,如如何处理大量机子的并行计算问题,如何发布数据,如何处理错误等等问题,仅仅搭建这个框架就另很多企业望而生畏。就在这样的大环境下MapReduce 的诞生可谓是历史的必然。它是这样一个抽象模型:利用一个输入key/value pa...原创 2013-10-07 10:53:26 · 107 阅读 · 0 评论 -
HBase compaction行为及触发条件
HBase compaction come in two varieties: minor and major.for the minor:将最新的几个小文件合成一个大文件。何时合并行为发生?当文件满足下面所有条件时,合并行为将发生:1> 参与合并的文件个数 >= hbase.hstore.compaction.min (default is 3), 但最多不超过...原创 2013-10-25 16:41:41 · 665 阅读 · 0 评论