Nosql概述
单机MySql时代
90年代,一个基本的网站访问量不会太大,单个数据库完全够用。
那个时候,更多的去使用静态网页html,服务器根本没有太大的压力。
思考一下这个时候整个网站的瓶颈是什么?
- 数据量太大,一个机器放不下了
- 数据的索引,一个机器内存也放不下
- 访问量(读写混合),一个服务器承受不了
只要你开始出现以上情况之一,那么你就必须要晋级!
Memcahced(缓存)+MySql+垂直拆分
网站80%的情况是在读,每次要去查数据库的话就十分麻烦,所以我们希望减轻数据库的压力,我们可以使用缓存来保证效率!
发展过程:
优化数据结构和索引–>文件缓存IO–>Memcached(当时最热门的技术)
分库分表+水平拆分+MySql集群
本质:数据库(读写)
早些年MyISAM:表所,十分影响效率!高并发下就会出现严重的锁问题!
转战Innordb:行锁
慢慢的就开始使用分库来解决写的压力!
最近的年代
MySQL等关系型数据库就不够用了!数据量很多,变化很快!
MySQL有的使用它来存储一些比较大的文件,博客,图片,数据量表很大,效率很低,如果一种数据库来专门处理这些数据,MySQL的压力就会变得十分小(研究如何处理这些问题),大数据的IO压力下,表几乎没法更改(如加一个列)
为什么要用Nosql
用户的个人信息,社交网络,地理位置,用户自己产生的数据,用户日志等等爆发式增长,这时候我们就需要使用nosql数据库,nosql可以很好的处理以上问题
什么是nosql
nosql, not only sql
关系型数据库:表格,行,列
泛指非关系型数据库的,随着web2.0互联网的诞生。传统的关系型数据库很难应对web2.0的时代!尤其 是超大规模的高并发的社区,暴露出很多难以克服的问题,nosql在当今大数据环境下发展的十分迅速,Redis是发展最快的,而且是我们当下必须要掌握的一种技术。
很多的数据类型用户的个人信息,社交网络,地理位置。这些数据类型的存储不需要一个固定的格式,不需要多余的操作就可以横向扩展。Map<String,Object>使用键值对来控制!
NoSql特点
解耦!
- 方便扩展(数据之间没有关系,很好扩展)
- 大数据量高性能(Redis一秒写8万次读11万次。nosql的缓存记录级,是一种细粒度的缓存,性能会比较高)
- 数据类型是多样的(不需要事先设计数据库,随取随用,如果是数据量十分大的表,很多人就无法设计了)
- 传统RDBMS和nosql
传统的RDBMS
- 结构化组织
- SQL
- 数据和关系都存在单独的表中
- 操作操作,数据定义语言
- 严格的一致性
- 基础的事务
NoSQL
- 不仅仅是数据
- 没有固定的查询语言
- 键值对存储,列存储,文档存储,图形数据库(社交关系)
- 最终一致性
- CAP定理和BASE(异地多活)
- 高性能,高可用,搞扩展
NOsql的四大分类:
KV键值对:
- 新浪:Redis
- 美团:Redis+Tair
- 阿里、百度云:Redis+ memcached
文档型数据库(bson格式和json格式一样):
- MongoDB(一遍必须要掌握)
- ConthDB
列存储数据库
- HBASE
- 分布式文件系统
图形关系数据库:
- 他不是存图形,放的是关系,比如:朋友圈社交网络,广告推荐!
- Neo4j,InfoGrid;