MySQL系列(8)--InnoDB数据字典

InnoDB数据字典解析
本文介绍了InnoDB数据字典的概念及其组成部分,包括sys_tables、sys_columns、sys_indexs和sys_fields等系统表。详细解释了数据字典的启动过程及如何加载普通用户表。

什么是数据字典?

用来存储元数据信息的表。比如表的描述、字段、对象、对象之间的关系。InnoDB中大多以系统表的形式保存。主要包括sys_tables,sys_columns,sys_indexs,sys_fields
sys_table存储表的信息,包括表面,ID,表空间号
sys_columns存储表中列的信息,包括列名,列ID,列的序号,列的类型,长度等信息
sys_index存储表的索引信息,包括索引名,索引对应的表空间,表ID,索引ID,索引类型
sys_fields存储索引中定义的索引列

InnoDB数据字典启动过程

这里写图片描述

1)innobase_start_or_create_for_mysql函数调用dict_create()函数进行数据字典的创建和加载工作。

2)dict_hdr_create完成系统表空间第7号页面dict header的初始化及创建SYS_TABLES两个索引、SYS_COLUMNS一个索引、SYS_INDEXES一个索引、SYS_FIELDS一个索引,其创建索引的函数是btr_create。

3)创建B+树索引后,通过dict_boot函数加载常驻内存的4个系统表。具体流程见流程图的②部分。

4)加载完成后,将这4个系统表挂在一个全局字典中:
dict0dict.h::

/* Dictionary system struct */  
struct dict_sys_t{  
ib_mutex_t      mutex;      /*!< mutex protecting the data 
                dictionary; protects also the 
                disk-based dictionary system tables; 
                this mutex serializes CREATE TABLE 
                and DROP TABLE, as well as reading 
                the dictionary data for a table from 
                system tables */  
row_id_t    row_id;     /*!< the next row id to assign; 
                NOTE that at a checkpoint this 
                must be written to the dict system 
                header and flushed to a file; in 
                recovery this must be derived from 
                the log records */  
hash_table_t*   table_hash; /*!< hash table of the tables, based 
                on name */  
hash_table_t*   table_id_hash;  /*!< hash table of the tables, based 
                on id */  
ulint       size;       /*!< varying space in bytes occupied 
                by the data dictionary table and 
                index objects */  
dict_table_t*   sys_tables; /*!< SYS_TABLES table */  
dict_table_t*   sys_columns;    /*!< SYS_COLUMNS table */  
dict_table_t*   sys_indexes;    /*!< SYS_INDEXES table */  
dict_table_t*   sys_fields; /*!< SYS_FIELDS table */  

/*=============================*/  
UT_LIST_BASE_NODE_T(dict_table_t)  
        table_LRU;  /*!< List of tables that can be evicted 
                from the cache */  
UT_LIST_BASE_NODE_T(dict_table_t)  
        table_non_LRU;  /*!< List of tables that can't be 
                evicted from the cache */  
};

结构体中sys_tables、sys_columns、sys_indexes、sys_fields四个结构存储上述对应的4个系统表。

结构体中HASH表及链表用来存储InnoDB中的所有表的缓存,包括系统表及用户表。table_hash哈希表按名字缓存,table_id_hash按表ID进行hash,LRU链表用来管理表对象缓存。

5)普通用户表加载流程见流程图的③、④部分。

当用户访问一个用户表时,首先需要从表对象缓存中查找这个表的SHARE对象,如果找到则直接从其实例化表对象链表中拿一个使用;如果没有找到,则需要重新打开这个表,需要找到这个表的字典信息。即③的流程。

具体加载一个表的字典是④流程,dict_load_table的工作。

a)首先需要找到SYS_TABLES表,也是先找缓存,缓存找不到再从系统表加载: dict_table_get_low

b)找到之后构建一个查询键值,从SYS_TABLES的name主键索引进行查询,如果诶呦找到或者该记录已经被删除则返回,否则解析找到的这条记录。然后根据这些信息创建表的内存对象table。

c)加载列操作与加载表的原理基本一样,对应系统表的SYS_COLUMNS,聚集索引为(TABLE_ID,POS),查找时,如果TABLE_ID相同,在POS从小到大排序,所以构造所有列的键值时,只需要通过TABLE_ID查询即可,按顺序取出所有列信息一一构造内存对象。

d)加载索引信息类似的流程

<think>好的,我现在需要处理用户关于MySQL 5.7版本中'in-place'升级或操作的具体实现和注意事项的问题。首先,我需要明确用户的需求,他们可能是在计划将现有的MySQL 5.7实例升级到更高版本,比如8.0,或者进行其他in-place操作,比如配置调整。用户提到的是“in-place”相关的技术问题或功能需求,所以重点应该放在原地升级的过程、步骤以及需要注意的事项上。 接下来,我需要查阅提供的引用资料,看看有哪些相关信息。引用[1]和[3]都提到了MySQL 5.7升级到8.0的注意事项,特别是配置参数的调整,比如sql_mode、basedir、密码认证插件等。引用[2]虽然主要讲的是5.6到5.7的升级,但其中提到的参数变化也可能对5.7到8.0的升级有参考价值,比如sql_mode的严格模式、innodb参数的调整等。 首先,我应该整理出in-place升级的基本步骤。根据引用[3],升级过程包括备份、停止服务、替换二进制文件、启动并升级数据字典等步骤。同时,需要注意配置文件的调整,比如sql_mode中去掉不再支持的选项,如NO_AUTO_CREATE_USER,以及设置正确的认证插件和字符集。 然后,注意事项方面,引用[1]提到升级前需要检查版本兼容性,确保当前版本在支持升级的范围内。例如,MySQL 8.0可能要求从特定的5.7版本开始升级。此外,需要处理参数的变化,比如sql_mode中废弃的选项,这可能导致初始化失败。引用[2]中的参数调整,如show_compatibility_56和log_timestamps,虽然主要是针对5.6到5.7,但也可能在5.7到8.0的升级中有类似的问题,需要检查。 另外,密码认证插件的变更也是一个重点。MySQL 8.0默认使用caching_sha2_password,而5.7可能使用mysql_native_password。用户可能需要提前更新账户插件,或者在配置文件中指定默认使用旧插件,避免连接问题。 还需要考虑备份和回滚方案。即使进行in-place升级,也需要有完整的备份,以防升级失败时能够恢复。此外,测试环境的验证是必不可少的,尤其是在处理生产环境之前,应在测试环境中模拟升级过程,检查是否存在兼容性问题。 可能的问题包括升级过程中由于参数不兼容导致的启动失败,或者SQL模式变化引发的应用程序错误。例如,在引用[1]中提到的sql_mode问题导致初始化失败,用户需要提前清理不再支持的sql_mode选项。另外,引用[2]提到的show_compatibility_56参数可能影响状态信息的获取,这在升级后需要调整。 最后,应该总结这些步骤和注意事项,以清晰的逻辑呈现给用户,确保他们能够逐步执行,并避免常见陷阱。同时,生成的相关问题可以帮助用户进一步了解其他可能相关的主题,比如性能优化或兼容性测试方法。</think>### MySQL 5.7 in-place升级的实现步骤与注意事项 #### 一、in-place升级的实现步骤 1. **环境检查与兼容性验证** - 确认当前MySQL 5.7版本是否支持直接升级到目标版本(如MySQL 8.0)。例如,MySQL 8.0要求从5.7.13或更高版本升级[^1]。 - 使用`mysqlcheck --all-databases --check-upgrade`命令检查表兼容性。 2. **备份数据** - 全量备份数据库,包括系统表(如`mysql`库)和用户数据。 - 建议使用物理备份工具(如`mysqldump`或Percona XtraBackup)。 3. **停止MySQL服务** ```bash systemctl stop mysqld ``` 4. **替换MySQL二进制文件** - 卸载旧版本MySQL,安装新版本(如8.0),注意保留原数据目录(如`/var/lib/mysql`)[^3]。 5. **调整配置文件** - 修改`my.cnf`,移除废弃参数(如`NO_AUTO_CREATE_USER`),并添加新版本支持的参数。例如: ```ini [mysqld] sql_mode = "STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION" # 移除不支持的选项 default_authentication_plugin = mysql_native_password # 兼容旧客户端 character_set_server = utf8mb4 # 使用推荐字符集 ``` 6. **启动MySQL并升级系统表** ```bash systemctl start mysqld mysql_upgrade -u root -p # 自动更新数据字典和系统表 ``` 7. **验证与测试** - 检查错误日志`/var/log/mysqld.log`,确认无报错。 - 运行应用程序测试,验证SQL兼容性。 --- #### 二、关键注意事项 1. **参数兼容性问题** - **sql_mode**:MySQL 8.0废弃了部分模式(如`NO_AUTO_CREATE_USER`),需在配置文件中移除[^1]。 - **身份认证插件**:MySQL 8.0默认使用`caching_sha2_password`,若客户端不支持,需在配置中显式指定`mysql_native_password`[^3]。 2. **字符集与排序规则** - MySQL 8.0默认字符集为`utf8mb4`,排序规则为`utf8mb4_0900_ai_ci`。若需保持与5.7一致,需在配置中显式指定。 3. **系统表变更** - 升级后,`mysql.user`表的字段和权限模型可能发生变化,需检查用户权限是否正常[^3]。 4. **回滚策略** - 若升级失败,需从备份中恢复数据,并重新安装原版本MySQL二进制文件。 5. **复制环境特殊处理** - 主从复制环境中,需先升级从库,再升级主库,并确保版本兼容性(如避免跨大版本的复制)[^2]。 --- #### 三、常见问题与解决方案 - **启动失败**:检查错误日志中是否包含废弃参数(如`sql_mode`配置错误),需清理配置文件。 - **客户端连接失败**:确认身份认证插件是否兼容,必要时修改用户密码插件: ```sql ALTER USER 'user'@'host' IDENTIFIED WITH mysql_native_password BY 'password'; ``` --- 相关问题
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值