ClickHouse源码阅读(0000 1101) —— ClickHouse是如何读写数据的（readVarUInt和writeVarUInt方法解析）

ClickHouse 数据传输机制

原创

于 2020-05-11 23:09:56 发布 · 951 阅读

2 ·

CC 4.0 BY-SA版权

本文详细解析了ClickHouse客户端与服务器端数据传输的过程，重点介绍了数值型数据的写入和读取方法。通过具体的示例，展示了数字如何被转换为二进制形式，并在网络上传输。同时，解释了服务端如何反向解析这些数据，还原为原始的数值。

先说写数据的方法，再说读数据的方法，知道怎么写，才知道怎么读。

写数据：写一个数值型的数字：

再Client端向Server端发起连接时，会写一个客户端的版本信息，客户端是怎么写的呢？源码如下：

        writeVarUInt(ClickHouseRevision::get(), *out);         //将"54420"写到out中(最终会用\x94\a9\03表示数字54420)

即把ClickHouseRevision::get()的结果54420写到out中。

/**举例:
   "54420"这个数字, 二进制形式是1101 0100 1001 0100,
   i = 0, x = 1101 0100 1001 0100, byte = 0001 0100, x > 0x7F, byte = 1001 0100 = \x94
   i = 1, x = 0000 0001 1010 1001, byte = 0010 1001, x > 0x7F, byte = 1010 1001 = \xa9
   i = 2, x = 0000 0000 0000 0011, byte = 0000 0011, x <= 0x7F, byte = 0000 0011 = \x03
   所以对于数字"54420", 会转化成 \x94\xa9\x03 进行传输 (1001 0100 1010 1001 0000 0011)
*/
inline void writeVarUInt(UInt64 x, WriteBuffer & ostr)
{
    for (size_t i = 0; i < 9; ++i)
    {
        uint8_t byte = x & 0x7F;
        if (x > 0x7F)//x > 0x7F 表示x的位数多于7位, 需要标记一下(将第8位置为1), 然后再进行后面的无符号右移7位
            byte |= 0x80;

        ostr.nextIfAtEnd();//检