MySQL数据库异构数据同步

据库设计 > MySQL数据库异构数据同步

MySQL数据库异构数据同步

2012-4-26<wbr><wbr><wbr> 作者：淘宝丁奇<wbr><wbr> 我要评论<br><br><br> 分享到：<br><br><br><br> 博客引用投稿打印<br><br><wbr>大 | 中 | 小<br><br><br><br> 导读：本文介绍了MySQL数据库的异构数据同步，其中后端以tair为例。所谓异构数据同步，是指应用只更新MySQL，而由后端的某些机制将这些更新应用到其他数据存储服务上。<br><br> 关键词：MySQL数据库 异构数据同步 tair 存储<br><br><br><br> 　　在实现levelDB挂载成MySQL引擎时，发现在实际存储是key-value格式时候，MySQL的异构数据同步，可以更简单和更通用。<br><br> 　　以tair为例，简要描述一下以MySQL为基础的一种方案。<br><br> 　　所谓异构数据同步，是指应用只更新MySQL，而由后端的某些机制将这些更新应用到其他数据存储服务上。<br><br> 　　1、MySQL-Tair 引擎<br><br> 　　a) 使用<br><br> 　　<br><br><br><br><br> 　　b) 说明<br><br> 　　这不是一个“存储引擎”，实际上数据存储在tair服务器上。执行insert/update/delete时，只是将对应的动作put /remove到tair服务器。当然这个过程对用户是透明的。<br><br> 　　2、MySQL-Tair 引擎怎么用于更新tair数据<br><br> 　　首先，数据更新有两种方式，同步更新和异步更新。<br><br> 　　a) 异步更新<br><br> 　　先说异步更新。这个类似“读binlog来更新数据”的方案。如果使用MySQL-Tair引擎，结构可以如下：<br><br> 　　<br><br><br><br><br> 　　说明：tair表只存在Slave上，与主库上要更新的表同名。<br><br> 　　完备性：以现在主库都是row格式的binglog结构为背景，这里Slave上收到的都会是这个更新的完整行信息，从中取出需要的key和value即可。<br><br> 　　b) 同步更新<br><br> 　　同步更新的意思，是应用端更新MySQL， 在MySQL和tair同时更新完成后，MySQL才返回用户更新成功。<br><br> 　　这种模式更像将tair作为MySQL的网络级别缓存服务。当然应用在读取的时候可以绕过MySQL直接访问tair，则只是作为一种更新方案。<br><br> 　　这种模式能够让更新后的下一次访问直接命中tair中的缓存数据。异步则无法保证。<br><br> 　　结构如下：<br><br> 　　<br><br><br><br><br> 　　说明：这里实体数据表与tair表在同一个数据库，表结构相同，引擎不同。应用还是更新数据表，用触发器触发相同的语句更新tair表。<br><br> 　　完备性：同样的，触发器会得到这个更新的新行全值。<br><br> 　　3、MySQL同步的优点<br><br> 　　这种有以下优势，即使只考虑异步更新模式：<br><br> 　　a) 不需要自己模拟一个MySQL数据库的从库、不需要维护连接(MySQL自带)<br><br> 　　b) 不需要解析binlog(什么时候binlog切换都要关心，要做的事情太多)<br><br> 　　c) 更方便的监控。MySQL数据库现有的监控接口，直接得到tps、延迟时间，同步点。<br><br> 　　d) 更方便的管理。如果主库挂了，一个Change master命令即可;想暂时停更新，stop slave、start slave。<br><br> 　　e) 更方便的扩展。 直接利用MySQL数据库的级联主从。<br><br> 　　当然还有读binlog方案无法实现的同步选择。<br><br> 　　4、其他<br><br> 　　不限于tair，只是举例。<br><br> 　　如果后端是一个可靠存储，如TFS，则可以当作一个存储表来使用，读写都是SQL接口。与直接更新TFS有什么区别?简单说一个，可以直接跟MySQL里的实体表做join操作。<br><br> 原文出处：http://www.mysqlops.com/2012/04/19/mysql-tair.html<br><br><wbr><br><br><wbr><br><br><br> 相关阅读<br><br><wbr><br><br> .Net环境下的NoSQL数据库DeNSo DB<br><br><wbr><br><br> Redis ziplist内部结构分析<br><br><wbr><br><br> MySQL数据库异构数据同步<br><br><wbr><br><br> MySQL数据库InnoDB存储引擎多版本控制实现原理分析<br><br><wbr><br><br> 开源项目MySQL数据库Syncer简介<br><br><wbr><br><br> 数据库星型模式结构与创建指南（下）<br><br><wbr><br><br> MongoDB构架图分享<br><br><wbr><br><br> MySQL与MongoDB复制群集分片设计及原理<br><br><wbr><br><br><wbr><br> TechTarget中国原创内容，原文链接：http://www.searchdatabase.com.cn/showcontent_60715.htm<br> TechTarget中国原创内容，原文链接：http://www.searchdatabase.com.cn/showcontent_60715.htm<br> TechTarget中国原创内容，原文链接：http://www.searchdatabase.com.cn/showcontent_60715.htm </wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr></wbr>