分区分表

oorzc2022年9月29日大约 3 分钟

分区分表

简述MySQL分表操作和分区的工作原理，分别说说分区和分表的
使用场景和各自优缺点。

工作原理
对用户而言，分区表是一个独立的逻辑表，但是底层MySQL将基
分成了多个物理子表，这对用户来说是透明的，每一个分区表都会
使用一个独立的表文件

创建表时使用partition by子句定义每个分区存放的数据，执行查
询时，优化器会根据分区定义过滤那些没有我们需要数据的分区，
这样查询只需要查询所需数据在的分区即可

分区表的原理

适用场景
1.表非常大，无法全部存在内存，或者只在表的最后有热点数据，
其他都是历史数据
2.分区表的数据更易维护，可以对独立的分区进行独立的操作
3.分区表的数据可以分布在不同的机器上，从而高效使用资源
4.可以使用分区表来避免某些特殊的瓶颈
5.可以备份和恢复独立的分区

限制
1.一个表最多只能有1024个分区
2.5.1版本中，分区表表达式必须是整数，5.5可以使用列分区
3.分区字段中如果有主键和唯一索引列，那么主键列和唯一列都必
须包含进来
4.分区表中无法使用外键约束
5.需要对现有表的结构进行修改
6.所有分区都必须使用相同的存储引擎
7.分区函数中可以使用的函数和表达式会有一些限制
8.某些存储引擎不支持分区
9.对于MyISAM的分区表，不能使用load index into cache
10.对于MyISAM表，使用分区表时需要打开更多的文件描述符

分库分表的原理
工作原理
通过一些HASH算法或者工具实现将一张数据表垂直或者水平进行
物理切分

适用场景
1.单表记录条数达到百万到千万级别时
2.解决表锁的问题

分表方式
水平分割
表很大，分割后可以降低在查询时需要读的数据和索引的页数，同
时也降低了索引的层数，提高查询速度

使用场景
1.表中的数据本身就有独立性，例如表中分别记录各个地区的数据
或者不同时期的数据，特别是有些数据常用，有些不常用
2.需要把数据存放在多个介质上

水平分表缺点
1.给应用增加复杂度，通常查询时需要多个表名，查询所有数据都
需UNION操作
2.在许多数据库应用中，这种复杂性会超过它带来的优点，查询时
会增加读一个索引层的磁盘次数

分表方式
垂直分表
把主键和一些列放在一个表，然后把主键和另外的列放在另一个表中