clickhouse 集群安装以及要点

最新推荐文章于 2025-05-13 10:57:09 发布

Alienware^

最新推荐文章于 2025-05-13 10:57:09 发布

阅读量539

点赞数 1

分类专栏： # ClickHouse 文章标签： clickhouse

本文链接：https://blog.youkuaiyun.com/weixin_45417821/article/details/119757298

版权

本文详细介绍了如何配置ClickHouse的分片集群，包括2副本6节点的集群配置步骤，以及创建和使用分布式表的过程。通过设置不同分片和副本，实现了数据的冗余和可用性提升，同时利用Distributed表引擎实现数据的水平切分和查询。文中还探讨了单节点和集群的权衡，并提供了具体的配置文件内容和操作指令。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

分片集群

副本虽然能够提高数据的可用性，降低丢失风险，但是每台服务器实际上必须容纳全量数据，对数据的横向扩容没有解决。
要解决数据水平切分的问题，需要引入分片的概念。通过分片把一份完整的数据进行切分，不同的分片分布到不同的节点上，再通过 Distributed 表引擎把数据拼接起来一同使用。
Distributed 表引擎本身不存储数据，有点类似于 MyCat 之于 MySql，成为一种中间件，通过分布式逻辑表来写入、分发、路由来操作多台节点不同分片的分布式数据。

如果对分片理解不好，点击：https://blog.youkuaiyun.com/weixin_45417821/article/details/117418925

注意：ClickHouse 的集群是表级别的，实际企业中，大部分做了高可用，但是没有用分片，避免降低查询性能以及操作集群的复杂性。

分片 2 副本共 6 个节点集群配置（供参考）

配置的位置还是在之前的/etc/clickhouse-server/config.d/metrika.xml，内容如下

注：也可以不创建外部文件，直接在 config.xml 的<remote_servers>中指定

<yandex>
    <remote_servers>
        <gmall_cluster>
            <!-- 集群名称-->
            <shard>
                <!--集群的第一个分片-->
                <internal_replication>true</internal_replication>
                <!--该分片的第一个副本-->
                <replica>
                    <host>Bigdata01</host>
                    <port>9000</port>
                </replica>
                <!--该分片的第二个副本-->
                <replica>
                    <host>Bigdata02</host>
                    <port>9000</port>
                </replica>
            </shard>
            <shard>
                <!--集群的第二个分片-->
                <internal_replication>true</internal_replication>
                <replica>
                    <!--该分片的第一个副本-->
                    <host>Bigdata03</host>
                    <port>9000</port>
                </replica>
                <replica>
                    <!--该分片的第二个副本-->
                    <host>Bigdata04</host>
                    <port>9000</port>

最低0.47元/天解锁文章