Hbase-RowKey Filter详解

最新推荐文章于 2024-01-23 16:36:48 发布
原创 最新推荐文章于 2024-01-23 16:36:48 发布 · 2.8k 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细介绍了HBase中RowFilter的使用方法，包括如何通过正则表达式、子字符串和前缀来筛选特定的rowkey数据。例如，提取以特定字符结尾、包含特定子串或以特定前缀开头的rowkey数据。

RowFilter是用来对rowkey进行过滤的,比较符如下:

相关的过滤方法使用:
提取rowkey以01结尾数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new RegexStringComparator(".*01$"));
提取rowkey以包含201407的数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new SubstringComparator("201407"));
提取rowkey以123开头的数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new BinaryPrefixComparator("123".getBytes()));

个人感觉：RegexStringComparator的正则比较器只适用的关系符为equals，其他符号less，lessor equal，greater，greaterorequal不启作用

HBase过滤器
weixin_58078092的博客
10-20 1056
HBase过滤器 文章目录HBase过滤器作用比较过滤器比较运算符常见的六大比较过滤器BinaryComparator（二进制比较器）BinaryPrefixComparator（二进制前缀比较器）NullComparator（空比较器）一般不用BitComparator（位比较器）一般不用RegexStringComparator（正则比较器）SubstringComparator示例代码rowKey过滤器：RowFilter列簇过滤器：FamilyFilter列过滤器：QualifierFilter列值
hbase详解
woaini886353的博客
05-10 8883
hbase hbase简介 什么是hbase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。 HBASE是Google Bigtable的开源实现，但是也有很多不同之处。比如：Google Bigtable利用GFS作为其文件存储系统，HBASE利用Hadoop HDFS..
HBASE Rowkey filter
06-28 314
HBASE通过Rowkey可以直接定位行，速度很快，在filter中，有2个API可以过滤主键： 1.RowFilter 行过滤器， 依靠行键来过滤 Scan scan = new Scan(); ...
hbase的api操作之过滤器
axs441702的博客
04-22 309
// LESS 小于//LESS_OR_EQUAL 小于等于//EQUAL 等于//NOT_EQUAL 不等于//GREATER_OR_EQUAL 大于等于//GREATER 大于//NO_OP 排除所有 //BinaryComparator 使用Bytes.compareTo()比较//BinaryPrefixComparator 和BinaryComparator差不多，从前面开始...
hbase RowFilter如何根据rowkey查询以及实例实现代码
linqing0201的博客
12-29 943
RowFilter用于过滤row key Operator Description LESS 小于 LESS_OR_EQUAL 小于等于 [EQUAL 等于 NOT_EQUAL 不等于 GREATER_OR_EQUAL 大于等于 GREATER 大于
hbase filter及rowkey范围检索使用并对结果集处理
Inkbamboo专栏
11-16 8004
hbase新API操作hbase过滤器之后对结果集进行处理生成spark临时表用于后续处理。 注意hbase中，表中存储的数据类型必须一一对应，否则会因为解码问题，导致最后结果非常的混乱 代码如下：    （如有大神看到，请不吝赐教，交流邮箱1970497138@qq.com） /** * 根据rowkey进行数据筛选 * 测试：使用scan的setStart
Hbase--put、BufferedMutator、get
XiaodunLP的博客
08-31 2153
Hbase写入数据的几种方式 我们总结一下hbase几种写入常见的方式，以及涉及的应用场景，另外再总结一下其中涉及到的一些原理知识。hbase一般的插入过程都使用HTable对象，将数据封装在Put对象中，Put在new创建的时候需要传入rowkey，并将列族，列名，列值add进去。然后HTable调用put方法，通过rpc请求提交到Regionserver端。写入的方式可以分为以下几种 单条...
HBase 系列（七）——HBase过滤器详解
黑白影的博客
06-07 9524
一、HBase过滤器简介 Hbase提供了种类丰富的过滤器（filter）来提高数据处理的效率，用户可以通过内置或自定义的过滤器来对数据进行过滤，所有的过滤器都在服务端生效，即谓词下推（predicate push down）。这样可以保证过滤掉的数据不会被传送到客户端，从而减轻网络传输和客户端处理的压力。 二、过滤器基础 2.1 Filter接口和FilterBase抽象类 Filter...
HBase RowKey设计与协处理器应用详解
读取流程则优先从 MemStore 查找最新数据，再按时间倒序扫描各个 StoreFile，利用布隆过滤器（Bloom Filter）跳过不包含目标 RowKey 的文件，极大提高读取速度。 整个系统基于 LSM-Tree（Log-Structured Merge Tree...
Hbase入门到实战-连载三(过滤器详解)
S1124654的博客
07-03 652
Hbase入门到实战-连载三(过滤器详解)
hbase行键过滤器RowFilter
努力奔跑的蜗牛
12-03 354
转载地址 https://my.oschina.net/u/3346994/blog/1923976 行过滤器视频链接 RowFilter是用来对rowkey进行过滤的,比较符如下: Operator Description LESS 小于 LESS_OR_EQUAL 小于等于 EQUAL 等于 NOT_EQUAL 不等于 GREATER_OR_EQUAL 大于等于...
HBase--RowFilter和BloomFilter原理
weixin_59295776的博客
09-05 429
RowFilter顾名思义就是对rowkey进行过滤，那么rowkey的过滤无非就是相等（EQUAL）、大于(GREATER)、小于(LESS)，大于等于(GREATER_OR_EQUAL)，小于等于(LESS_OR_EQUAL)和不等于(NOT_EQUAL)几种过滤方式。· 存储开销：BloomFilter是列族级别的配置，一旦表格中开启BloomFilter，那么在生成StoreFile时同时会生成一份包含BloomFilter结构的文件MetaBlock，所以会增加一定的存储开销和内存开销。
hbase shell行键过滤正则匹配
最新发布
qq_36382892的博客
01-23 1408
在实际运维生产环境的过程中，经常遇到需要过滤rowkey包含部分字符的场景。以下列出可行的几种操作方式。
Hbase笔记 —— 过滤器
一纸春秋的博客
12-03 1497
Hbase 过滤器，介绍了多种比较运算符，多种比较器之间的含义与区别。并且对几种常用的过滤器给出了实例代码，与代码分析
Hbase中的filter使用
生存，生活，差之毫厘谬以千里也
07-11 449
https://blog.youkuaiyun.com/lr131425/article/details/72676254
【图文详细 】HBase——过滤器查询
谦卑t
12-07 294
1、比较过滤器 2、专用过滤器  
Hbase—— rowkey 过滤器（rowfilter）
weixin_30607029的博客
07-21 920
1、RowFilter 提取rowkey以01结尾数据Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new RegexStringComparator(".*01$"));提取rowkey以包含201407的数据Filter filter = new RowFilter(CompareFilter.Compar...
HBase通过Java利用过滤器简单查询数据
weixin_47878012的博客
12-04 863
通过RowFilter过滤rowKey 比0003小的所有值 @Test /* * 使用RowFilter过滤器查询*/ public void rowFileter()throws IOException { Scan scan = new Scan(); //查询所有rowkey比0003小的数据 /* * 使用rowFileter查询比0003小的所有数据 * rowkey过滤器*/
hbase数据查询及过滤器详细使用
热门推荐
小强签名设计 的博客
06-23 2万+
创建并插入数据： hbase(main):179:0> create 'scores','grade','course' hbase(main):180:0> put 'scores','zhangsan01','course:art','90' hbase(main):181:0> scan 'scores' ROW
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值