ClickHouse教程 — 第三章 ClickHouse的SQL语句_clickhouse正则匹配查询(1)

原创已于 2024-04-13 05:37:39 修改 · 930 阅读

24 ·

CC 4.0 BY-SA版权

文章标签：

#clickhouse #sql #数据库

于 2024-04-13 05:37:37 首次发布

程序员专栏收录该内容

17 篇文章

订阅专栏

本文介绍了在ClickHouse中按数组内容过滤数据的方法，包括使用`arrayExists`和`ARRAYJOIN`，以及如何清理日志表以节省存储空间。同时提到了如何通过Go语言学习数据库技术，特别是分享了一份详细的Go语言学习资料链接。

2 clickhouse按条件查询array中的数据

参考文章：clickhouse - 如何按数组列内容过滤Clickhouse表

测试：

CREATE TABLE test
(
id Int64 COMMENT ‘id’,
class\_ids Array(Int64) COMMENT ‘分类id集合’,
capture\_time Datetime COMMENT ‘被捕获时的时间【Time转换而来】’
)
ENGINE = ReplacingMergeTree
PARTITION BY toYYYYMMDD(capture_time)
PRIMARY KEY id
ORDER BY (id)
COMMENT ‘测试表’;

INSERT INTO test VALUES(1,[1,2,3,4,5,6,7],‘2023-03-06 12:10:10’)(2,[3,4],‘2023-03-06 12:10:10’)(3,[3,6,7],‘2023-03-06 12:10:10’)(4,[3,6,7],‘2023-03-06 12:10:10’);

SELECT DISTINCT(class_ids) FROM test WHERE arrayExists(x -> x IN (6,9), class_ids) = 1;

SELECT DISTINCT(class_ids) FROM test ARRAY JOIN class_ids as class WHERE class IN (6,9);

3 SQL实现多字段去重

参考文章：sql实现多字段去重

4 清除数据clickhouse日志表

当对clickhouse里的数据表进行时，clickhouse默认会记录执行的查询语句到日志表里，随着查询的增多，日志表里的数据也会逐渐累积，导致占用过多空间。

clickhouse系统里面自带了query_log和query_thread_log表，这两个表不清除的话，时间久了，会挺大的，可以通过设置ttl时间来处理。

保存一个月的数据：

ALTER TABLE query_log MODIFY TTL event_date + toIntervalMonth(1);

ALTER TABLE query_thread_log MODIFY TTL event_date + toIntervalMonth(1);

保存15天的数据：

ALTER TABLE query_log MODIFY TTL event_date + toIntervalDay(15);

ALTER TABLE query_thread_log MODIFY TTL event_date + toIntervalDay(15);

清除分区数据：

查看分区

SELECT partition FROM system.parts WHERE (database = ‘system’) AND (table = ‘query_thread_log’) GROUP BY partition ORDER BY partition DESC

删除分区

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Go语言工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Go语言全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Golang知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024b （备注Go）

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！*