转自:http://blog.youkuaiyun.com/qtyl1988/article/details/39519951
用Redis作MySQL数据库缓存,必须解决2个问题。首先,应该确定用何种数据结构存储来自mysql的数据;在确定数据结构之后,还要考虑用什么标识作为该数据结构的键。
直观上看,Mysql中的数据都是按表存储的;更微观地看,这些表都是按行存储的。每执行一次select查询,Mysql都会返回一个结果集,这个结果集由若干行组成。所以,一个自然而然的想法就是在redis中找到一种对应于Mysql行的数据结构。Redis中提供了五种基本数据结构,即字符串(string)、列表(list)、哈希(hash)、集合(set)和有序集合(sorted set)。经过调研,发现适合存储行的数据结构有两种,即string和hash。
要把Mysql的行数据存入string,首先需要对行数据进行格式化。事实上,结果集的每一行都可以看做若干由字段名和其对应值组成的键值对集合。这种键值对结构很容易让我们想起Json格式。因此,这里选用Json格式作为结果集每一行的格式化模板。根据这一想法,我们可以实现将结果集格式化为若干Json对象,并将Json对象转化为字符串存入Redis的代码:
-
-
- string Cache2String(sql::Connection *mysql_connection,
- redisContext *redis_connection,
- sql::ResultSet *resultset,
- const string &resultset_id, int ttl) {
- if (resultset->rowsCount() == 0) {
- throw runtime_error("FAILURE - no rows");
- }
-
- string prefix("cache.string:" + resultset_id + ":");
- unsigned int num_row = 1;
- sql::ResultSetMetaData *meta = resultset->getMetaData();
- unsigned int num_col = meta->getColumnCount();
-
- string redis_row_set_key("resultset.string:" + resultset_id);
- redisReply *reply;
- string ttlstr;
- stringstream ttlstream;
- ttlstream << ttl;
- ttlstr = ttlstream.str();
- resultset->beforeFirst();
-
-
- while (resultset->next()) {
- string redis_row_key;
- stringstream keystream;
- keystream << prefix << num_row;
- redis_row_key = keystream.str();
- Json::Value row;
- for (int i = 1; i <= num_col; ++i) {
- string col_label = meta->getColumnLabel(i);
- string col_value = resultset->getString(col_label);
- row[col_label] = col_value;
- }
- Json::FastWriter writer;
- string redis_row_value = writer.write(row);
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "SET %s %s",
- redis_row_key.c_str(),
- redis_row_value.c_str()));
- freeReplyObject(reply);
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "SADD %s %s",
- redis_row_set_key.c_str(),
- redis_row_key.c_str()));
- freeReplyObject(reply);
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "EXPIRE %s %s",
- redis_row_key.c_str(),
- ttlstr.c_str()));
- freeReplyObject(reply);
- ++num_row;
- }
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "EXPIRE %s %s",
- redis_row_set_key.c_str(),
- ttlstr.c_str()));
- freeReplyObject(reply);
- return redis_row_set_key;
- }
要把Mysql的行数据存入hash,过程要比把数据存入string直观很多。这是由hash的结构性质决定的——hash本身就是一个键值对集合:一个“父键”下面包含了很多“子键”,每个“子键”都对应一个值。根据前面的分析可知,结果集中的每一行实际上也是键值对集合。用Redis键值对集合表示Mysql键值对集合应该再合适不过了:对于结果集中的某一行,字段对应于hash的“子键”,字段对应的值就是hash“子键”对应的值,即结果集的一行刚好对应一个hash。这一想法的实现代码如下:
-
-
- string Cache2Hash(sql::Connection *mysql_connection,
- redisContext *redis_connection,
- sql::ResultSet *resultset,
- const string &resultset_id, int ttl) {
- if (resultset->rowsCount() == 0) {
- throw runtime_error("FAILURE - no rows");
- }
-
- string prefix("cache.hash:" + resultset_id + ":");
- unsigned int num_row = 1;
- sql::ResultSetMetaData *meta = resultset->getMetaData();
- unsigned int num_col = meta->getColumnCount();
-
- string redis_row_set_key("resultset.hash:" + resultset_id);
- redisReply *reply;
- string ttlstr;
- stringstream ttlstream;
- ttlstream << ttl;
- ttlstr = ttlstream.str();
-
- resultset->beforeFirst();
- while (resultset->next()) {
- string redis_row_key;
- stringstream keystream;
- keystream << prefix << num_row;
- redis_row_key = keystream.str();
- for (int i = 1; i <= num_col; ++i) {
- string col_label = meta->getColumnLabel(i);
- string col_value = resultset->getString(col_label);
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "HSET %s %s %s",
- redis_row_key.c_str(),
- col_label.c_str(),
- col_value.c_str()));
- freeReplyObject(reply);
- }
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "SADD %s %s",
- redis_row_set_key.c_str(),
- redis_row_key.c_str()));
- freeReplyObject(reply);
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "EXPIRE %s %s",
- redis_row_key.c_str(),
- ttlstr.c_str()));
- freeReplyObject(reply);
- ++num_row;
- }
-
- reply = static_cast<redisReply*>(redisCommand(redis_connection,
- "EXPIRE %s %s",
- redis_row_set_key.c_str(),
- ttlstr.c_str()));
- freeReplyObject(reply);
- return redis_row_set_key;
- }
至此,我们已经给出了两种存储Mysql结果集的方案,这就是我们在篇首提出的第一个问题,即选择何种数据结构存储Mysql结果集的答案。下一篇文章将研究第二个问题,即数据结构键的标识符选择问题。