mysql分区

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

mysql的分区概念

在mysql 5.1.3之后引入和partition(分区)的概念。这个是个好东东。以前遇到一个大表的时候,我们会手动将其分为几个小表(就是分表操作)。但是分表操作有几个缺点:1 麻烦,这里指的麻烦是不仅对于调用分表的sql语句的处理上,也是分表的具体操作步骤上。2 当一个表从单表变为分表的时候,上层sql逻辑也需要进行修改,而且是大范围的修改!

 

引入分区的概念就简单多了。强调一点,一个表分区了,它还是一个表!一个表分表了,它就不是一个表了!这实际上是个会让你不得不使用分区的理由,当你对一个表分区的时候,上层的代码逻辑是不用变的。

分区就是一个表分割在不同的磁盘文件中。

 

你可以使用mysql> SHOW VARIABLES LIKE '%partition%'; 确定mysql是否支持partition

分区类型

分区的关键词就是partition,它分为Range, List, Hash, Key这几种分割方法

Range partition: 按照某个字段的范围进行分区。这种常用在时间字段上。

比如使用场景是论坛的文章表,论坛的文章最经常进行的查询也不过就是在最近几个月的论坛文章中进行操作。所以这样的文章内容使用时间进行分区是最好不过的了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
CREATE TABLE article (
 
article_id int NOT NULL AUTO_INCREMENT,
 
article_content varchar(1000),
 
article_time DATE  NOT NULL DEFAULT '1970-01-01' ,
 
key(article_id)
 
)
 
ENGINE=INNODB
 
PARTITION BY RANGE (YEAR(article_time)) (
 
PARTITION p0 VALUES LESS THAN (1991),
 
PARTITION p1 VALUES LESS THAN (1996),
 
PARTITION p2 VALUES LESS THAN (2001),
 
PARTITION p3 VALUES LESS THAN MAXVALUE
 
) ;

上面的语句就是按照年份将文章分为4个分区

List partition:按照某个字段有哪些值分在一个分区内

直接拿官网的一个sql语句做例子

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
CREATE TABLE employees (
 
id INT NOT NULL,
 
fname VARCHAR(30),
 
lname VARCHAR(30),
 
hired DATE  NOT NULL DEFAULT '1970-01-01' ,
 
separated DATE  NOT NULL DEFAULT '9999-12-31' ,
 
job_code INT,
 
store_id INT
 
)
 
PARTITION BY LIST(store_id) (
 
PARTITION pNorth VALUES IN (3,5,6,9,17),
 
PARTITION pEast VALUES IN (1,2,10,11,19,20),
 
PARTITION pWest VALUES IN (4,12,13,14,18),
 
PARTITION pCentral VALUES IN (7,8,15,16)
 
);
 
Hash partition: 按照表中任意个int类型的字段进行分割
 
CREATE TABLE part_table (
 
id int NOT NULL AUTO_INCREMENT,
 
name varchar(30),
 
store_id int,
 
key(id)
 
)
 
ENGINE=INNODB
 
PARTITION BY HASH(store_id)
 
PARTITIONS 4;

Key partition: Hash partition的进阶版,将主键作为分割的标准

比如

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
CREATE TABLE part_table2 (
 
id int NOT NULL AUTO_INCREMENT PRIMARY KEY,
 
name varchar(30),
 
store_id int
 
)
 
ENGINE=INNODB
 
PARTITION BY KEY()
 
PARTITIONS 4;

恰当的分区当然比单表是好多的,不仅利于管理,也利于提高查询效率。分区由于代价非常小,所以在一般的使用上应该先考虑使用它。但是它也不是万能钥匙,分区说到底还是在一个mysql上进行的操作,如果数据量达到一定程度,还是会需要分库分表来进行操作的。

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
6月前
|
存储 关系型数据库 MySQL
MySQL分区表详解
在我们日常处理海量数据的过程中,如何有效管理和优化数据库一直是一个既重要又具有挑战性的问题
51 0
|
8月前
|
存储 关系型数据库 MySQL
【MySQL】MySQL分区表详解
【MySQL】MySQL分区表详解
171 0
|
存储 SQL 算法
炸锅了,MySQL表500W行,居然有人不做分区?
炸锅了,MySQL表500W行,居然有人不做分区?
708 0
炸锅了,MySQL表500W行,居然有人不做分区?
|
存储 关系型数据库 MySQL
Mysql分区表使用
一、什么是分区表 分区表就是按一定规则将一张表分割成多个部分,达到和物理分表同样的效果,但操作起来更 简单,不同于物理分表那样使用时还需要指定使用的数据表。对于使用者来说和操作普通表无差别。 二、优势与限制 1、优势 分区可以在一个表中存储比单个磁盘或文件系统分区上的数据更多的数据,因为我们可 以将
241 0
|
MySQL 关系型数据库 存储
MySQL分区如何迁移
背景 需求来源 MySQL越来越流行,而且存储在MySQL的数据量也越来越大,单表数据达亿行已经是非常常见的现象,而这些表里面保存了大量的历史记录,严重影响SQL执行的效率。本文是针对客户需求,迁移MySQL Innodb大表分区中部分历史归档分区到其他实例或者其他库表,而且迁移过程尽量减少对业务环境的影响。
1786 0
|
Oracle 关系型数据库 MySQL
关于MySQL的分区索引
前段时间有同事问MySQL 分区索引是全局索引还是本地索引。全局索引和本地索引是Oracle的功能,MySQL(包括PostgreSQL)只实现了本地索引,并且因为有全局约束的问题,MySQL分区表明确不支持外键,并且主键和唯一键必须要包含所有分区列,否则报错。
5709 1
|
关系型数据库 MySQL 存储
MySQL分区
MySQL分区 1.MySQL分区的种类 范围分区: RANGE Partitioning 列表分区:LIST Partitioning 列分区:COLUMNS Partitioning HASH分区:HASH Partitioning KEY分区:KEY Partitioning 子分区(复合分区):Subpartitioning(不建议使用) 2.范围分区:range partitioning 按照范围分区的表就是每个分区表达式值位于给定范围的行。
5426 0
|
存储 关系型数据库 MySQL
MySQL分区表使用总结
我们经常遇到一张表里面保存了上亿甚至过十亿的记录,这些表里面保存了大量的历史记录。 对于这些历史数据的清理是一个非常头疼事情,特定场景下分区表可以很好的解决,但分区又有哪些坑或注意事项呢?
6763 0
|
关系型数据库 MySQL
|
关系型数据库 MySQL 索引