- 博客(3)
- 收藏
- 关注
RSS订阅原创 从大数据谈起3：离线数据分析系统的设计思路
随着互联网、移动互联网和物联网的发展，如何从数据分析中挖掘商业价值，已经成为互联网界最热门的话题，而大数据背景下的应用，之前也说过，主要分为两种用途：OLTP和OLAP。OLTP是用来支持线上业务，需要快速响应用户请求，支持事务，对于容错性和稳定性要求非常高。OLAP主要是离线计算，用来做数据分析，推荐、统计、广告等业务。两者的设计思路完全不同，OLTP相对来说发展比较完善，有非常多的开源产品（m
2013-07-01 14:24:45
2998
原创 从大数据谈起2：分片和分层
上一篇说了OLTP和OLAP，这篇文章从OLTP说起。 在一个大型的在线业务里，数据量一旦很大的时候，就需要考虑如何加入更多的服务器来存储。 在互联网的发展过程中，当开始碰到数据库访问瓶颈时，仅仅是单张数据表到了一定的容量时，比如某互联网公司有了千万级别的用户时，查询操作就开始变慢。之后某位牛X的技术人员想出了一个很好的解决方案，就是分表，按照用户的ID把用户表分拆成好几个，这
2013-07-01 14:21:48
1490
原创 从大数据谈起1：OLTP和OLAP的设计区别
最近互联网技术有四个趋势非常火爆： 移动社交云计算大数据 这个文章系列主要讲大数据的一些方方面面。首先要讲的是一个抽象概念，可能很多人想起大数据必定首先想起hadoop和mysql集群一类的，可惜这些都是工具，并非是大数据的全部，只研究工具怎么玩在技术上就落了下乘。我们首先还是从概念来看，大数据处理系统概念其实很简单，只有两个组成部分：存储+查询。不管再复杂的大数据分析系统，都
2013-07-01 14:18:18
3797
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人