Manticore Search 表附加操作详解：将普通表转换为实时表-优快云博客

本文链接：https://blog.youkuaiyun.com/gitblog_00264/article/details/148415622

Manticore Search 表附加操作详解：将普通表转换为实时表

manticoresearch manticoresoftware/manticoresearch: 这是一个用于快速搜索和索引数据的搜索引擎。适合用于需要快速搜索和索引数据的场景。特点：易于使用，支持多种数据格式，具有高性能和可扩展性。项目地址: https://gitcode.com/gh_mirrors/ma/manticoresearch

概述

在 Manticore Search 中，ATTACH TABLE 是一个强大的功能，它允许我们将普通表(plain table)附加到实时表(RT表)中，或者将一个实时表附加到另一个实时表中。这个功能在数据迁移和大批量数据导入场景中特别有用。

使用场景

场景一：普通表转实时表

当我们需要完全重建一个实时表时（例如需要更新分词设置），直接准备一个普通表然后将其转换为实时表，通常比通过批量INSERT操作向实时表添加数据更加高效。

场景二：大批量数据导入

当需要向现有实时表添加大量新数据时，先创建包含这些数据的普通表，再将其附加到实时表中，比直接向实时表插入数据更为简便。

语法详解

基本语法格式如下：

ATTACH TABLE plain_or_rt_table TO TABLE rt_table [WITH TRUNCATE]

参数说明

plain_or_rt_table：要附加的源表，可以是普通表或实时表
rt_table：目标实时表
WITH TRUNCATE：可选参数，表示在附加前清空目标表

工作原理

ATTACH 操作实际上不会改变表数据本身，它只是：

重命名文件（使源表成为目标RT表的新磁盘块）
更新元数据

因此这个操作通常非常快速，经常能在1秒内完成。

重要特性

表结构继承：当附加到空RT表时，源表的字段、属性和文本处理设置（分词器、词形变化等）会被复制到目标表，配置文件中RT表的相应定义将被忽略。
TRUNCATE选项：使用此选项时，RT表会在附加前被清空，确保操作是原子的，或者保证附加的源表将成为目标RT表中唯一的数据。

使用限制

目标RT表必须为空，或者与源表具有相同的设置
源表必须设置 phrase_boundary_step=0 和 stopword_step=1
当源表附加到非空RT表时：
- RT表已有的数据会存储为常规磁盘块
- 被附加的表成为最新的磁盘块
- 相同ID的文档会被标记为删除

实际操作示例

初始状态

假设我们有一个空RT表rt，结构如下：

DESC rt;
+-----------+---------+
| Field     | Type    |
+-----------+---------+
| id        | integer |
| testfield | field   |
| testattr  | uint    |
+-----------+---------+

同时有一个非空普通表plain，包含一些数据：

SELECT * FROM plain WHERE MATCH('test');
+------+--------+----------+------------+
| id   | weight | group_id | date_added |
+------+--------+----------+------------+
|    1 |   1304 |        1 | 1313643256 |
|    2 |   1304 |        1 | 1313643256 |
|    3 |   1304 |        1 | 1313643256 |
|    4 |   1304 |        1 | 1313643256 |
+------+--------+----------+------------+

执行附加操作

ATTACH TABLE plain TO TABLE rt;

结果验证

附加后，RT表继承了源表的结构并包含了数据：

DESC rt;
+------------+-----------+
| Field      | Type      |
+------------+-----------+
| id         | integer   |
| title      | field     |
| content    | field     |
| group_id   | uint      |
| date_added | timestamp |
+------------+-----------+

SELECT * FROM rt WHERE MATCH('test');
+------+--------+----------+------------+
| id   | weight | group_id | date_added |
+------+--------+----------+------------+
|    1 |   1304 |        1 | 1313643256 |
|    2 |   1304 |        1 | 1313643256 |
|    3 |   1304 |        1 | 1313643256 |
|    4 |   1304 |        1 | 1313643256 |
+------+--------+----------+------------+

原普通表plain在附加后不再可用。