
clickhouse使用经验
文章平均质量分 63
zcx_bigdata
大数据技术
展开
-
Clickhouse之ReplicatedMergeTree原理详解
ReplicatedMergeTree作为Clickhouse(下文简称CK)复制表系列的基础表引擎,包涵了CK数据副本最核心的逻辑,本文详细介绍了ReplicatedMergeTree的核心原理,以便于更好地去使用ReplicatedMergeTree系列的表引擎。在ReplicatedMergeTree的核心逻辑中,大量使用了ZooKeeper分布式协同的能力,来实现多个ReplicatedMergeTree副本实例之间的协同,包括主副本选举、副本状态感知、操作日志分...原创 2022-01-17 10:19:42 · 10781 阅读 · 0 评论 -
Clickhouse使用经验之谈(持续更新)
1.OLAP工具。2.适合大宽表,读大量行但是少量列,结果集小。3.不更新或少更新(延迟高、代价大)。4.避免热点、数据倾斜,对写入数据预处理,将数据均匀分散到各shard的各块盘。5.集群限流方案:并发高导致集群瘫痪 大查询导致集群瘫痪(包括:查询请求不合理导致集群负载过高,扫描数据量过大,join使用不规范等)避免对集群安全性造成影响,需要提前做预判。6.集群统一调度方案:队列有优先级控制,ad-hoc查询优先级高,同步查询,大部分查询对于使用者来说感觉不到异步。原创 2021-08-26 11:49:23 · 1025 阅读 · 0 评论