phoenix添加索引

本文详细介绍了如何通过修改HBase的配置文件hbase-site.xml来优化HBase的性能,包括调整WAL编码、RPC调度、查询超时、线程池等待时间、RPC请求超时、RegionServer租约时间、客户端操作超时、Scan缓存大小及超时时间等关键参数。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

在hbase-site.xml中增加如下配置

 

<property>
  <name>hbase.regionserver.wal.codec</name>
  <value>org.apache.hadoop.hbase.regionserver.wal.IndexedWALEditCodec</value>
</property>
<property>
  <name>hbase.region.server.rpc.scheduler.factory.class</name>
  <value>org.apache.hadoop.hbase.ipc.PhoenixRpcSchedulerFactory</value>
  <description>Factory to create the Phoenix RPC Scheduler that uses separate queues for index and metadata updates</description>
</property>
<property>
  <name>hbase.rpc.controllerfactory.class</name>
  <value>org.apache.hadoop.hbase.ipc.controller.ServerRpcControllerFactory</value>
  <description>Factory to create the Phoenix RPC Scheduler that uses separate queues for index and metadata updates</description>
</property>
<!-- 指定查询在客户端上超时的毫秒数。 默认值是10分钟。-->
<property>
    <name>phoenix.query.timeoutMs</name>
    <value>86400000</value>
</property>
<!-- 当线程数大于客户端线程池数量,线程在终止之前等待新任务的最长时间(以毫秒为单位)。默认值为60秒 -->
<property>
    <name>phoenix.query.keepAliveMs</name>
    <value>86400000</value>
</property>
<!-- 默认60s,该参数表示一次RPC请求的超时时间。RPC时间超过该值,客户端就会主动关闭socket -->
<property>
    <name>hbase.rpc.timeout</name>
    <value>86400000</value>
</property>
<!-- regionserer租约时间,默认值是60s -->
<property>
    <name>hbase.regionserver.lease.period</name>
    <value>86400000</value>
</property>
<!-- 默认20min,该参数表示HBase客户端发起一次数据操作直至得到响应之间总的超时时间 -->
<property>
    <name>hbase.client.operation.timeout</name>
    <value>86400000</value>
</property>
<!-- scan缓存,默认为2147483647,不可太大,避免占用过多内存。 -->
<property>
    <name>hbase.client.scanner.caching</name>
    <value>1000</value>
</property>
<!-- 默认60s,该参数是表示HBase客户端发起一次scan操作的rpc调用至得到响应之间总的超时时间 -->
<property>
    <name>hbase.client.scanner.timeout.period</name>
    <value>86400000</value>
</property>

0: jdbc:phoenix:> select count(1) from "wap_track";
+-----------+
| COUNT(1)  |
+-----------+
| 1888606   |
+-----------+
1 row selected (8.6 seconds)
0: jdbc:phoenix:> create index wap_uid_index on "wap_track"("info"."uid");
1,888,606 rows affected (43.177 seconds)

 


 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值