MySQL数据库架构学习笔记（二）

一、大表带来的问题

---

1.1 什么样的表可以称之为大表

1. 一个表的数据量超过千万行的时候就会对数据库性能造成影响
2. 数据库文件巨大，表数据文件超过10G

1.2 大表会对查询造成影响

1. 什么样的表可以称之为大表
   （1） 一个表的数据量超过千万行的时候就会对数据库性能造成影响
   （2） 数据库文件巨大，表数据文件超过10G
2. 大表会对查询造成影响
   （1） 慢查询：很难再一定时间内过滤出所需要的数据
3. 大表对DDL（数据定义）操作的影响
   （1） 建立索引需要很长时间，会产生的风险：

MySQL版本<5.5建立索引会锁表

MySQL版本>=5.5虽然不会锁表但会引起主从延迟

（2） 修改表结构需要长时间锁表，造成长时间的主从延迟，影响正常数据操作
4. 如何处理数据库中的大表
（1） 分库分表。难点：分表主键的选择、分表后跨分区数据的查询和统计
（2） 大表的历史数据归档，减少对前后端业务的影响。难点：归档时间点的选择、如何进行归档操作

二、大事务带来的影响

---

2.1 什么是事务

1. 事务是数据库系统区别于其他一切文件系统的重要特性之一
2. 事务是一组具有原子性的SQL语句，或是一个独立的工作单元

2.2 事务的四个性质

1. 事务的原子性（ATOMICITY）
   定义：一个事务必须被视为一个不可分割的最小工作单元，整个事务中的所有操作要么全部提交成功，要么全部失败，对于一个事务来说，不可能只执行其中一部分的操作。
2. 事务的一致性（CONSISTENCY）
   定义：一致性是指事务将数据库从一种一致性状态转换到另外一种一致性状态，在事务开始之前和事务结束之后数据库中数据的完整性没有被破坏。
3. 事务的隔离性（ISOLATION）
   定义：要求一个事务对数据库数据的修改，在未提交完场前对于其他事务是不可见的。
   四种隔离性：（隔离性由高到低，并发性由低到高）未提交读、已提交读（不可重复读）、重复读、可串行化
4. 事物的持久性（DURABILITY）
   定义：一旦事务提交，则其所做的修改就会永久保存到数据库中。此时即使系统崩溃，已提交的修改数据也不会丢失

2.3 什么是大事务

定义：运行时间比较长，操作的数据比较多的事务
风险：锁定太多的数据，造成大量的阻塞和锁超时。回滚所需要的时间比较长。容易造成主从延迟。

---

如何处理大事务？
（1） 避免一次处理太多数据
（2） 移除不必要在事务中的select操作