mysql table_open_cache 到底影响有多深

探究table_open_cache对MySQL性能的影响
通过sysbench压力测试,分析不同table_open_cache值对MySQL性能的影响,探讨其最佳设置与系统性能之间的关系。

之前腾讯云有一期问过这个问题,其实看似这个table_open_cache,没有什么。

到底table_open_cache 到底是一个什么存在感,我们的来看看。

首先我们先来一个测试通过sysbench 来进行一个压力测试,我们在同样的数据的基础上,其他所有的参数都不变,仅仅变化 table_open_cache,然后我们看看整体的压测数据有什么变化。

测试方式以及环境

1 测试的数据库 8G , 4 core 内存 磁盘SSD 每秒300MB

测试 table_open_cache 值变化

1  4096

2  8192

3  1024

4   96   

1 4096

结果

    transactions:                             193526 (806.21 per sec.)

    read/write requests:                 3483840 (14513.26 per sec.)

    total time taken by event execution: 72006.8461s

    response time:

         min:                                  6.27ms

         avg:                                372.08ms

         max:                               1866.33ms

         approx.  95 percentile:             604.04ms


修改table_open_cache 为8192

transactions:                             188719 (786.11 per sec.)

 read/write requests:                 3397113 (14150.74 per sec.)

total time taken by event execution: 72013.6051s

    response time:

         min:                                        6.57ms

         avg:                                        381.59ms

         max:                                       1534.00ms

         approx.  95 percentile:             630.08ms

 transactions:                            189366 (788.85 per sec.)

 read/write requests:                 3408744 (14199.90 per sec.)

 total time taken by event execution: 72006.3405s

    response time:

         min:                                  5.48ms

         avg:                                380.25ms

         max:                               1433.75ms

         approx.  95 percentile:             619.79ms

在使用同样的压测命令,系统直接报错

只好降低同时连接的线程,降低到 200

 transactions:                        174108 (725.36 per sec.)

 read/write requests:                 3134050 (13056.84 per sec.)

total time taken by event execution: 48001.7575s

  response time:

         min:                                  5.70ms

         avg:                                275.70ms

         max:                               1528.54ms

         approx.  95 percentile:             472.15ms


从上面的简单测试,我们可以得出一个最简单的结果

table_open_cache 与你的系统的性能,在他的大小变化的时候对你的系统是有影响的,并且较小的值会让你的系统的性能整体下降。而过大的设置,并没有让系统的性能有提升,甚至还有小幅度的下降 event execution

到这里估计有人会问,怎么设置这个值,我从来没有动过他,也没出过问题。

其实官方给了一个设置这个值的方法,官方给出的建议是你系统的连接的threads * N = table_open_cache 这里,连接数已经可以通过平时连接得出,但N这个数据,就只能预估了,每次的连接的查询的表的数量,说实话这个不好控制和锁定,我哪里知道平均一个连接每次访问几个表,当然如果你有金规铁律,一个SQL 最多不能产生3次JOIN 那就比较好办了。

平均1000的连接 * 3 = 3000  所以默认的4096 还是富富裕裕。 大多数的使用MYSQL 的公司,有几个人能说清楚MYSQL 每次的连接访问几个表呢。

那到底有什么办法看看我的 table_open_cache 到底是不是够, 有一个通用的公式

Table cache hit rate = table_open_cache*100/Opened_tables

根据这个公式我们看看不同的 table_open_cache 的 hit rate

96*100/739812 = 0.0129

1024*100/739812 = 0.13

4096* 100/739812 = 0.55

8192*100/739812 = 1.1

从上面的数字可以看到如果将table_open_cache 设置为6140 可能会更好一些。当然估计性能差距和4096之间也不会有太多差距。

有人可能会跳出来,有那么麻烦我设置大些

结果导致压力测试无法进行,也就是说过大和过小的设置都会导致系统无法正常工作。

WHY ,官方已经给出了解释

当然还有一个对于table_open_cache 的参数联动的设置 open_file_limit 所以在调整你的table_open_cache 时也是需要调整你的open_file_limit 

open_files_limit= Table_open_cache*2

所以系统的参数之间是环环相关的,互相影响。


<think>我们正在讨论如何正确配置MySQLtable_open_cache参数。根据引用内容,table_open_cacheMySQL中一个重要的参数,它决定了可以同时打开的表的数量。如果设置过小,可能会导致频繁打开和关闭表,影响性能;如果设置过大,可能会占用过多资源,甚至导致文件描述符不足。根据引用[1]:默认的table_open_cache为64,这个数值通常偏小,尤其在高连接数(max_connections较大)的情况下容易引起性能问题。可以通过观察状态变量`Opened_tables`(表示打开表的次数)和`Open_tables`(表示当前打开表的数量)来判断是否需要调整。如果`Opened_tables`的值很大且持续增长,说明需要增大table_open_cache。引用[1]还提到,一般建议将table_open_cache设置为max_connections的值(或者乘以每个查询中平均涉及的表数)。例如,如果max_connections为100,每个查询平均涉及2个表,那么可以设置为200。但实践中,设置为max_connections的值通常就足够了。引用[5]提到,设置过大可能会遇到文件描述符不足的问题(错误23或24)。这时需要调整open_files_limit参数(增加mysqld可打开的文件数)或者减小table_open_cache或max_connections。另外,引用[4]提到,MySQL将全局的tablecache划分为多个Table_cacheinstance,由参数table_open_cache_instances控制。这个参数在MySQL5.6.6及更高版本中引入,用于减少锁竞争。每个instance负责一部分tablecache,用户线程根据thread_id选择instance。通常,建议将table_open_cache_instances设置为1到16之间,但具体设置需要根据实际情况调整。配置步骤:1.查看当前设置:```sqlSHOWVARIABLESLIKE'table_open_cache';SHOWVARIABLESLIKE'max_connections';SHOWVARIABLESLIKE'table_open_cache_instances';```2.查看状态以判断当前设置是否合理:```sqlSHOWGLOBALSTATUSLIKE'Open%tables';```如果`Open_tables`接近table_open_cache,并且`Opened_tables`持续增长,说明需要增大table_open_cache。3.设置新的值(例如设置为1024):```sqlSETGLOBALtable_open_cache=1024;```注意:这个设置是临时的,重启后会失效。要永久生效,需要在MySQL配置文件(如my.cnf或my.ini)中添加或修改:```[mysqld]table_open_cache=1024```4.同时,如果遇到文件描述符不足的问题,需要调整open_files_limit。在配置文件中设置:```[mysqld]open_files_limit=65535```注意:open_files_limit的值应该大于table_open_cache的值(因为MySQL还需要打开其他文件)。5.关于table_open_cache_instances,通常默认值(例如8)在大多数情况下是合适的。如果需要调整,可以在配置文件中设置:```table_open_cache_instances=8```6.修改配置文件后,需要重启MySQL服务。总结:配置table_open_cache的关键是观察`Opened_tables`的状态,将其调整到一个合理的值,避免频繁打开表。同时注意与max_connections和open_files_limit的协调。注意:每个系统的情况不同,调整后需要观察性能变化。根据上述内容,生成相关问题:1.如何监控table_open_cache是否设置合理?2.调整table_open_cache后,如何验证效果?3.除了table_open_cache,还有哪些与表缓存相关的参数?4.文件描述符不足时,除了调整open_files_limit,还可以如何处理?</think>### 如何正确配置MySQLtable_open_cache参数 配置MySQL的`table_open_cache`参数需综合考虑系统资源、连接数和表使用情况,以下是具体步骤: #### 1. **诊断当前状态** ```sql -- 查看当前缓存设置 SHOW VARIABLES LIKE 'table_open_cache'; -- 检查表打开状态(关键指标) SHOW GLOBAL STATUS LIKE 'Open%tables'; ``` - **Open_tables**:当前打开的表数量(理想值应接近`table_open_cache`)[^1] - **Opened_tables**:累计打开次数(值过高说明缓存不足)[^1] 示例诊断: ``` +---------------+-------+ | Variable_name | Value | +---------------+-------+ | Open_tables | 345 | -- 建议接近table_open_cache值 | Opened_tables | 9,734,116 | -- 过高说明频繁重新打开表 +---------------+-------+ ``` #### 2. **计算合理值** - **基础公式**: ```math \text{推荐值} = \text{max\_connections} \times \text{平均每查询涉及表数} ``` 实践中可简化为: ```math \text{推荐值} \approx \text{max\_connections} \quad [^1] ``` - **上限约束**: 需满足: ```math \text{table\_open\_cache} < \text{open\_files\_limit} - 100 \quad [^5] ``` #### 3. **动态调整** ```sql -- 临时生效(无需重启) SET GLOBAL table_open_cache = 1024; ``` 修改后立即监控`Opened_tables`增长速率是否下降[^1]。 #### 4. **永久生效配置** 在`my.cnf`中添加: ```ini [mysqld] table_open_cache = 1024 # 建议值为max_connections的1-1.5倍 table_open_cache_instances = 8 # 减少锁竞争[^4] open_files_limit = 65535 # 必须大于table_open_cache[^5] ``` #### 5. **优化验证** - 观察指标: - `Opened_tables`增速显著降低 - `SHOW PROCESSLIST`中`Opening tables`状态减少[^1] - 错误处理: 若出现`Can't open file (errno: 24)`,需增加`open_files_limit`[^5] #### 6. **注意事项** - 避免极端值:过大会消耗内存,过小导致性能瓶颈[^3] - 多实例配置:高并发时`table_open_cache_instances`应设为CPU核心数[^4] - 表统计:复杂查询涉及多表时需适当增大缓存 > **配置示例**: > 若`max_connections=500`且无文件限制问题: > ```math > \text{table\_open\_cache} = 500 \sim 750 > ```
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值