对于mysql的query_cache认识的误区

本文详细解读了MySQL查询缓存的运作原理,纠正了关于查询缓存键值的常见误解,并通过实验和源码分析揭示了空格对查询缓存的影响。实验证明,查询结果的命中与否取决于SQL语句的类型而非空格位置。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一直以来,对于mysql的query_cache,在网上就流行着这样的说法,“对于mysql的query_cache键值就是mysql的query,所以,如果在query中有任何的不同,包括多了个空格,都会导致mysql认为是不同的查询”,其实,这一种说法是不完全正确的。首先第一点,mysql的query_cache的键值并不是简单的query,而是query加databasename加flag。这个从源码中就可以看出。在这里不做重点描述,后续可以针对于这一点再具体分析。重要的是第二点,是不是加了空格,mysql就认为是不同的查询呢?实际上这个是要分情况而言的,要看这个空格加在哪。 如果空格是加在query之前,比如是在query的起始处加了空格,这样是丝毫不影响query cache的结果的,mysql认为这是一条query, 而如果空格是在query中,那会影响query cache的结果,mysql会认为是不同的query。

下面我们通过实验及源码具体分析。首先,我们先试验一下:

首先,我们看一下mysql query_cache的状态:

image

首先,我们可以确认,mysql的query_cache功能是打开的。

其次,我们看一下状态:

image

因为这个db是新的db,所以hits,inset都为0,现在我们执行一条select语句:

状态变为:

image

可以看到,执行一条select后,现在的qcache状态为,insert+1,这样我们就可以推断出,现在刚才那条select语句已经加入了qcache中。那我们现在再将刚才那条sql前面加上空格,看看会怎样呢?

image

请注意,这条sql,比刚才那条sql前面多了一个空格。

按照网上的理论,这条sql应该会作为另一个键而插入另一个cache,不会复用先前的cache,但结果呢?

image

我们可以看到,hits变为了1,而inserts根本没变,这就说明了,这条在前面加了空格的query命中了没有空格的query的结果集。从这,我们就可以得出结论,网上先前流传的说法,是不严谨的。

 

那究竟是怎么回事呢?到底应该如何呢?为什么前面有空格的会命中了没有空格的query的结果集。其实,这些我们可以通过源码获得答案。

翻看下mysql的源码,我这翻看的是5.1的,在send_result_to_client(这个函数既是mysql调用query_cache的函数)这个函数里面有这样一段,

 

 /*
 Test if the query is a SELECT
 (pre-space is removed in dispatch_command).

 First '/' looks like comment before command it is not
 frequently appeared in real life, consequently we can
 check all such queries, too.
 */
    if ((my_toupper(system_charset_info, sql[i])     != 'S' ||
         my_toupper(system_charset_info, sql[i + 1]) != 'E' ||
         my_toupper(system_charset_info, sql[i + 2]) != 'L') &&
        sql[i] != '/')
    {
      DBUG_PRINT("qcache", ("The statement is not a SELECT; Not cached"));
      goto err;
    }

这段代码,是在检验语句是否为select语句,重点是上面那段注释。特别是括弧中的,pre-space is removed in dispatch_command,也就是说,在语句开始之前的多余的空格已经被处理过了,在dispache_command这个函数中去掉了。

我们看下dispache_command这个方法,在这个方法里有这样一段:

 if (alloc_query(thd, packet, packet_length))
      break;                    // fatal error is set
    char *packet_end= thd->query() + thd->query_length();
    /* 'b' stands for 'buffer' parameter', special for 'my_snprintf' */
    const char* end_of_stmt= NULL;

在这里,会调用alloc_query方法,我们看下这个方法的内容:

bool alloc_query(THD *thd, const char *packet, uint packet_length)
{
  char *query;
  /* Remove garbage at start and end of query */
  while (packet_length > 0 && my_isspace(thd->charset(), packet[0]))
  {
    packet++;
    packet_length--;
  }
  const char *pos= packet + packet_length;     // Point at end null
  while (packet_length > 0 &&
     (pos[-1] == ';' || my_isspace(thd->charset() ,pos[-1])))
  {
    pos--;
    packet_length--;
  }
  /* We must allocate some extra memory for query cache 

 The query buffer layout is:
 buffer :==
 <statement> The input statement(s)
 '\0' Terminating null char (1 byte)
 <length> Length of following current database name (size_t)
 <db_name> Name of current database
 <flags> Flags struct
 */
  if (! (query= (char*) thd->memdup_w_gap(packet,
                                          packet_length,
                                          1 + sizeof(size_t) + thd->db_length +
                                          QUERY_CACHE_FLAGS_SIZE)))
      return TRUE;
  query[packet_length]= '\0';
  /*
 Space to hold the name of the current database is allocated. We
 also store this length, in case current database is changed during
 execution. We might need to reallocate the 'query' buffer
 */
  char *len_pos = (query + packet_length + 1);
  memcpy(len_pos, (char *) &thd->db_length, sizeof(size_t));

  thd->set_query(query, packet_length);

  /* Reclaim some memory */
  thd->packet.shrink(thd->variables.net_buffer_length);
  thd->convert_buffer.shrink(thd->variables.net_buffer_length);

  return FALSE;
}

这个方法在一开始就会对query进行处理(代码第4行),将开头和末尾的garbage remove掉。

 

看到这里,我们基本已经明了了,mysql会对输入的query进行预处理,将空格等东西给处理掉,所以不会开头的空格不会影响到query_cache,因为对mysql来说,就是一条query。

 

本文来自于 http://www.log4myself.info/archives/102

转载于:https://www.cnblogs.com/clam/archive/2012/03/29/2423081.html

MySQL参数调优策略详解 4.1 内存和缓存配置 在 MySQL 中,内存和缓存的优化对于提升数据库性能至关重要。以下是关键参数的优化策略: 1. 缓冲池(Buffer Pool) • InnoDB Buffer Pool (适用于 InnoDB 存储引擎): SET GLOBAL innodb_buffer_pool_size = 8589934592; 推荐值:占用 服务器物理内存的 50%-75%,但需根据业务负载进行调整。 作用:缓存数据页、索引、插入缓冲等,提高读写性能。 相关参数 : 3. 临时表优化 • SET GLOBAL tmp_table_size = 268435456 • 作用:减少磁盘临时表的使用,提高查询性能。 4. 连接缓存 SET GLOBAL table_open_cache = 4000; SET GLOBAL table_definition_cache = 2000; • 作用:减少表打开和关闭的开销,提高查询性能。 4.2 并发优化处理 高并发场景下,需要优化 MySQL 的线程管理、事务处理和锁机制。 1. 线程优化 SET GLOBAL thread_cache_size = 64; • 作用:减少频繁创建和销毁线程的开销,提高并发处理能力。 2. 连接管理 SET GLOBAL max_connections = 500; SET GLOBAL wait_timeout = 600; • max_connections 设定最大连接数,过高可能会占用过多资源,可结合 SHOW STATUS LIKE 'Threads_connected'; 监控实际连接数。 • wait_timeout 设定连接的超时时间,避免空闲连接占用资源。 3. 事务并发控制 SET GLOBAL innodb_flush_log_at_trx_commit = 2; SET GLOBAL sync_binlog = 0; • innodb_flush_log_at_trx_commit=2 允许日志每秒写入一次磁盘,提高性能,但可能导致崩溃时数据丢失。 • sync_binlog=0 关闭 binlog 立即同步,提高事务处理速度。 4. 锁优化 SET GLOBAL innodb_lock_wait_timeout = 50; • 避免长时间锁等待影响业务。 4.3 日志与持久化 日志优化可以提高 MySQL 的数据安全性和恢复速度,同时影响写入性能。 1. Redo Log(重做日志) • 作用:加速事务恢复,提高写性能。 2. Binary Log(二进制日志) SET GLOBAL binlog_format = 'ROW'; • binlog_format=ROW 适用于主从复制,提高数据一致性。 3. General Log(一般查询日志) SET GLOBAL general_log = OFF; • 避免影响性能,只有在调试时开启。 4. Slow Query Log(慢查询日志) SET GLOBAL slow_query_log = ON; SET GLOBAL long_query_time = 1; • long_query_time=1 记录执行时间超过 1 秒的 SQL 语句,帮助优化慢查询。 介绍一下理论知识,像是这是什么,为什么要用这些
03-26
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值