Mysql表分区的选择与实践小结

时间 2019-11-12

标签 mysql 分区选择实践小结栏目 MySQL 繁體版

原文原文链接

在一些系统中有时某张表会出现百万或者千万的数据量，尽管其中使用了索引，查询速度也不必定会很快。这时候可能就须要经过分库，分表，分区来解决这些性能瓶颈。mysql

一. 选择合适的解决方法

1. 分库分表。sql

分库分表从名字上就明白是须要建立额外的新数据库或新表，能够建在其余的机器上也能够是和当前数据库同一台机器。在优化查询上可能须要买新机器或者要修改逻辑代码了。好比一张user表，当数据超过10W，就能够建立新的user表，假设是user2。经过接收的UID，和分组10W(假定)，取模就是对应的user表名的索引数字。数据库

2. 分区。服务器

分区这里是指表分区，mysql数据库管理系统提供的表功能，分区后逻辑上是同一张表，物理上数据存储是分开的。可否优化查询还取决于在查询中是否使用到了分区字段，这个就和索引的使用有点相似，可是好处就是这个不像分库分表，能够几乎不修改业务逻辑代码就能够提高速度。下面再总结一下mysql数据保存格式和innodb，myisam。并发

2.1. innodb存储引擎。函数

innodb，支持事务处理，外来键，在查询方面要慢于myisam。对并发友好，支持行锁和表锁，行锁的造成要看查询条件。有共享空间结构和独立空间结构，保存的格式有frm和ibddata1(共享结构)，ibd(独立结构)。工具

2.1.1.共享空间结构。性能

共享结构为innodb默认的结构，除了frm保存innodb表结构外，整个数据库全部表的索引和数据源都保存在ibdata中。能够经过在mysql-ini中添加 innodb_file_per_table=1设置为独立空间结构。优化

2.1.2.独立空间结构。spa

独立空间结构就是每一个对应的表保存对应的数据源和索引在一个后缀为ibd的文件中，表结构一样也保存在frm中。

2.2. myisam存储引擎

myisam是mysql默认存储引擎，不支持事务，可是会对I/O进行平均分配，相较于innodb查询速度要快，对并发不友好，支持表锁。格式frm一样也是表结构，myd为表的数据源，myi表的索引储存(因此一张表的索引不是越多越好，由于在添加和修改数据时也须要对索引库进行修改和添加)

二. 表分区的几种分区类型。

1. RANGE分区：基于属于一个给定连续区间的列值，把多行分配给分区。

2. LIST分区：相似于按RANGE分区，区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。

3. HASH分区：基于用户定义的表达式的返回值来进行选择的分区，该表达式使用将要插入到表中的这些行的列值进行计算。这个函数能够包含MySQL 中有效的、产生非负整数值的任何表达式。

4. KEY分区：相似于按HASH分区，区别在于KEY分区只支持计算一列或多列，且MySQL服务器提供其自身的哈希函数。必须有一列或多列包含整数值。

具体介绍能够搜索如下"mysql表分区的分区类型"。

三. 表分区的建立。

par格式为保存的是分区的规则，ibd就是分别为每一块分区后的数据源，如下为innodb分区，myisam的是有多个myd文件同时也存在par。

1. 新建表时添加分区。

好比如下建立一张employees 的表，并建立了list类型的4个分区，以store_id 字段为分区字段。

CREATE TABLE employees (
    id INT NOT NULL,
    fname VARCHAR(30),
    lname VARCHAR(30),
    hired DATE NOT NULL DEFAULT '1970-01-01',
    separated DATE NOT NULL DEFAULT '9999-12-31',
    job_code INT,
    store_id INT
)

PARTITION BY LIST(store_id)
    PARTITION pNorth VALUES IN (3,5,6,9,17),
    PARTITION pEast VALUES IN (1,2,10,11,19,20),
    PARTITION pWest VALUES IN (4,12,13,14,18),
    PARTITION pCentral VALUES IN (7,8,15,16)
);

2. 存在的表添加分区

将原来的数据以当前的分区规则对原来数据进行规整，如下是对ztest表添加range类型的3个分区，以id字段为分区字段。

alter table rm_ztest partition by RANGE (id)   
(
	PARTITION p0 VALUES LESS THAN (948),  
	PARTITION p1 VALUES LESS THAN (960),
	PARTITION p3 VALUES LESS THAN MAXVALUE
)

3. navicat for mysql工具添加或建立。

平时我使用上面的工具比较多，因此他也有一个添加分区的功能。"新建表"或者是"设计表"，点击"选项"，“分割区”就能够进入分区的建立了。

四. 分区查询的实验结果。

我就拿了一张几百万数据的表备份了副本，其中一张建立了分区，并使用id分区字段进行查询。

从上面两张截图能够看出使用了分区的查询速度要比未使用分区快差很少1倍，可是若是不使用id为查询条件或没有使用到，速度两者是同样的，甚至有时分区过的还要慢于未分区的，因此在使用上还需结合当前业务作合理的选择。

explain partitions select * from table_name …… 能够查看当前查询是否使用了分区，分区使用的是哪几个等等信息。

公众号