hbase
关注
分享
扫一扫
文章平均质量分 91
Ink__Bamboo
心安则无事，心静则踏实，coding coding coding!!!
展开
-
hbaseFilter使用，以及简单封装
学习笔记：简单的将spark访问hbase使用filter过滤的操作进行封装，功能并不完善，无法做到把case class以反射的方式传入到方法中进行字段的构造把构件表的操作放在单独处理的部分package cn.DaLong_hbaseimport java.utilimport scala.collection.JavaConverters._import or原创 2017-05-11 15:25:54 · 1000 阅读 · 0 评论 -
Hbase Filter Scala 实战
转载地址： http://blog.youkuaiyun.com/yhb315279058 作者很牛的大部分内容来自,示例代码部分都用scala编写介绍:hbase的filter用来控制返回的数据,主要用在Get和Scan中,通过filter的限制可以指定返回列簇,列,时间戳和版本号.所有的filter都在服务端生效,叫做谓词下推.这样可以保证被过滤掉的数据不会被转载 2017-05-09 18:55:16 · 1032 阅读 · 0 评论 -
spark 连接hbase hive
1. Spark连接hbase//后续更多细节补充，现在还不太懂。 如有大神看到请不吝赐教Spark连接hbase的步骤：1. 构建sparkconf配置信息，设置spark主机位置，设置程序名称，资源数等2. 构建sparkcontext3. 构建Sqlcontext4. 通过sqlcontext操作构建RDD5.原创 2017-05-06 15:12:48 · 4332 阅读 · 0 评论 -
列数据库与行数据库对比以及应用范围
转载自：论坛一位大神要了解列式数据库的本质，我觉得先从逻辑视角和物理视角来区分一些概念比较好，比如DBMS从逻辑视角来看， 可以分为1）Relative Database Management System2）Non-Relative Database Management System而从物理（存储的）视角来看，则可以分为：1）Row Based转载 2017-02-21 21:26:12 · 8156 阅读 · 0 评论 -
HBase简介（很好的梳理资料）
HBase简介（很好的梳理资料）转载自: http://www.cnblogs.com/johnnyflute/p/3654426.html一、 简介history started by chad walters and jim2006.11 G release paper on BigTable2007.2 ini转载 2017-05-13 08:34:48 · 542 阅读 · 0 评论 -
HBase 常用Shell命令
转自：http://my.oschina.net/u/189445/blog/595232 hbase shell命令 描述 alter修改列族（column family）模式count统计表中行的数量create创建表de转载 2017-11-01 14:22:16 · 613 阅读 · 0 评论 -
HBase Rowkey设计推荐文章列表
忘记文章的出处了，作者如果看到可以留言，必将修改。HBase Rowkey的散列与预分区设计http://www.aboutyun.com/forum.php?mod=viewthread&tid=8909HBase的rowkey设计http://www.aboutyun.com/forum.php?mod=viewthread&tid=71转载 2017-11-02 09:40:15 · 423 阅读 · 0 评论 -
hbase filter及rowkey范围检索使用并对结果集处理
hbase新API操作hbase过滤器之后对结果集进行处理生成spark临时表用于后续处理。注意hbase中，表中存储的数据类型必须一一对应，否则会因为解码问题，导致最后结果非常的混乱代码如下： （如有大神看到，请不吝赐教，交流邮箱1970497138@qq.com）/** * 根据rowkey进行数据筛选 * 测试：使用scan的setStart原创 2017-11-16 14:21:50 · 7903 阅读 · 0 评论