
大数据/分布式
文章平均质量分 74
zkaipmoo
这个作者很懒,什么都没留下…
展开
-
日志系统搭建一(flume+hadoop+hive)
由于公司现在业务日志量zhu原创 2014-05-18 18:23:29 · 2487 阅读 · 1 评论 -
阿里巴巴开源项目: 基于mysql数据库binlog的增量订阅&消费
阿里巴巴开源项目: 基于mysql数据库binlog的增量订阅&消费背景早期,阿里巴巴B2B公司因为存在杭州和美国双机房部署,存在跨机房同步的业务需求。不过早期的数据库同步业务,主要是基于trigger的方式获取增量变更,不过从2010年开始,阿里系公司开始逐步的尝试基于数据库的日志解析,获取增量变更进行同步,由此衍生出了增量订阅&消费的业务,从此开启了一段新纪元。ps. 目前内部使用的同步,已经支翻译 2016-01-12 11:15:45 · 623 阅读 · 0 评论 -
并发模型归纳
市面上几种常用的并发模型:1.事件驱动select,poll,epollnginx高系能采用的就是epoll事件驱动模型2.多线程3.多进程4.多协程原创 2016-03-17 14:54:36 · 484 阅读 · 0 评论 -
并发过高导致库存买超情况
生产环境中遇到并发过高,导致库存买超的情况。可以通过以下几种情况解决:1.使用数据库锁机制防止并发方法1 select for update;update set stock = stock - x;insert into order_list(order_id) values (1);方法2 return = update set stock = stock -x whe原创 2016-01-14 14:42:47 · 3027 阅读 · 1 评论 -
数据库同步中间件
背景早期,阿里巴巴B2B公司因为存在杭州和美国双机房部署,存在跨机房同步的业务需求。不过早期的数据库同步业务,主要是基于trigger的方式获取增量变更,不过从2010年开始,阿里系公司开始逐步的尝试基于数据库的日志解析,获取增量变更进行同步,由此衍生出了增量订阅&消费的业务,从此开启了一段新纪元。ps. 目前内部版本已经支持mysql和oracle部分版本的日志解析,当前的can转载 2016-03-23 11:57:29 · 3615 阅读 · 0 评论