MySQL5.7新特性——gtid基础

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

1、MySQL5.7 新特性:gtid复制

①:GTID是什么

    是事务的ID,唯一识别号,全局唯一。

    随事务记录到Binary Log中,用来标识事务。

    每个事务有一个Gtid_log_event。

    

②:GTID的构成

    UUID + Sequence Number


注意:Sequence Number是MySQL服务器内部的一个事务顺序号.一个MySQL服务器上的事务不会有重复的顺序号(保证服务器内唯一)。

每个MySQL服务器有一个全局唯一的UUID.


③:GTID的目的

   简化复制的使用过程和降低复制集群维护的难度:不再依赖Master的binlog文件名和文件中的位置。

   由 CHANGE MASTER TO MASTER_LOG_FILE=‘Master-bin.000010’, MASTER_LOG_POS=‘214’; 改为:CHANGE MASTER TO AUTO_POSITION=1;


④:AUTO_POSITION的原理

*:MySQL Server 记录了所有已经执行了的事务的GTID,包括复制过来的。

   可用过系统变量Gtid_executed查看。

*:Slave记录了所有从master接收过来的事务的GTID。

   可通过Retrieve_gtid_set查看

*:Slave连接到Master时,会把gtid_executed中的gtid发给master. Master会自动跳过这些事务,只将没有复制的事物发送到Slave去。



⑤:MySQL5.7GTID在线启用GTID功能的优点

   不需要重启MySQL服务器.

   配置过程在线,整个复制集群仍然对外提供读和写的服务.

   不需要改变复制拓扑结构.

   可以在任何结构的复制集群中在线启用GTID功能.

     更简单的搭建主从复制。

     比传统的复制更加安全。

     GTID是连续的没有空洞的,保证数据的一致性,零丢失。


⑥:GTID的开启场景

   新系统搭建时直接开启GTID功能

     老系统升级到MySQL5.7后开启GTID功能

   老系统开启GTID的复杂性

     复制集群中有的开启了GTID,有的没有开启。

     开启前的BINLOG中的事务没有GTID,开启后的有GTID


GTID启动过程中的模式:

   全局系统变量GTID_MODE

     OFF           不产生GTID,  Slave只接受不带GTID的事务

     OFF_PERMISSIVE   不产生GTID,  Slave即接受不带GTID的事务也接受带GTID的事务

     ON_PERMISSIVE    产生GTID,  Slave即接受不带GTID的事务也接受带GTID的事务

     ON            产生GTID,  Slave只接受带GTID的事务


⑦:简化的配置过程

 SET @@GLOBAL.GTID_MODE = OFF_PERMISSIVE; (在每一个服务器上设置)

 SET @@GLOBAL.GTID_MODE = ON_PERMISSIVE; (在每一个服务器上设置)

 等一段时间, 让不带GTID的binlog events在所有的服务器上执行完毕。

 SET @@GLOBAL.GTID_MODE = ON; (在每一个服务器上设置)



存储GTID到表中的目的:

   支持Slave不开启Binlog的场景

      有些Slave永远不会被切换成Master.不开启binlog,可以节省空间,提高性能。

      MySQL5.6上GTID只能存储在binlog中,所以必须开启Binlog才能使用GTID功能。   

  

    MySQL5.7则不需要开启binlog了。




如何记录GTID到表中

   如果开启了binlog,在切换binlog时,将当前binlog的所有GTID插入gtid_executed表中。插入操作等价于一个或多个INSERT语句。

INSERT INTO mysql.gtid_executed(UUID, 1, 100)


如果没有开启binlog,每个事务在提交之前,会执行一个等价的INSERT的操作。此操作是该事务的一部分,和事务的其他操作整体保持原子性。

BEGIN;

INSERT INTO mysql.gtid_executed(UUID, 101, 101);

COMMIT;



gtid_executed表的压缩:

压缩前

+--------------------------------------+----------------+--------------+

| source_uuid                          | interval_start | interval_end |

+--------------------------------------+----------------+--------------+

| xxxxxxxx-4733-11e6-91fe-507b9d0eac6d |              1 |            1 |

+--------------------------------------+----------------+--------------+

| xxxxxxxx-4733-11e6-91fe-507b9d0eac6d |              2 |            2 |

+--------------------------------------+----------------+--------------+

| xxxxxxxx-4733-11e6-91fe-507b9d0eac6d |              3 |            3 |

+--------------------------------------+----------------+--------------+

压缩后

+--------------------------------------+----------------+--------------+

| source_uuid                          | interval_start | interval_end |

+--------------------------------------+----------------+--------------+

| xxxxxxxx-4733-11e6-91fe-507b9d0eac6d |              1 |            3 |

+--------------------------------------+----------------+--------------+


控制压缩频率

mysql> SET GLOBAL gtid_executed_compression_period = N;   (N – 事务的数量)



GTID的受限语句检测:

   GTID不支持的语句/事务:

      CREATE TABLE … SELECT

   事务中同时使用了支持事务和不支持事务的引擎。

   BEGIN;

   INSERT INTO innodb_tbl(…);

   INSERT INTO myisam_tbl(…);

   COMMIT;

   在事务中使用CREATE/DROP TEMPORARY TABLE 

   BEGIN;

   INSERT INTO innodb_tbl(…);

   CREATE TEMPORARY TABLE temp1;

   ...

   COMMIT;



启用GTID前,检测系统中是否有GTID不支持的语句/事务,提前处理。


全局系统变量enforce-gtid-consistency

OFF    :不检测是否有GTID不支持的语句/事务

WARN   :当发现不支持的语句/事务时,返回警告,并在日志中记录警告信息。

ON     :当发现语句/事务不支持GTID时,返回错误。

+---------+------+---------------------------------------------------------------+

| Level   | Code | Message                                                       |

+---------+------+---------------------------------------------------------------+

| Warning | 1786 | Statement violates GTID consistency: CREATE TABLE ... SELECT. |

+---------+------+---------------------------------------------------------------+

在线上的数据库服务器或测试环境中,开启WARN模式。

    处理完GTID不支持的语句后,再启用GTID。












本文转自一个笨小孩51CTO博客,原文链接:http://blog.51cto.com/fengfeng688/1924994 ,如需转载请自行联系原作者






相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
3月前
|
存储 SQL 关系型数据库
MySQL相关(五)- 事务四大特性及隔离级别的详细介绍
MySQL相关(五)- 事务四大特性及隔离级别的详细介绍
43 0
|
3月前
|
存储 SQL 关系型数据库
MySQL 事务的 ACID 特性
MySQL事务是什么,**它就是一组数据库的操作,是访问数据库的程序单元,事务中可能包含一个或者多个 SQL 语句。这些SQL 语句要么都执行、要么都不执行。**我们知道,在MySQL 中,有不同的存储引擎,有的存储引擎比如MyISAM 是不支持事务的,所以说**MySQL 事务实际上是发生在 存储引擎部分**。
50 0
MySQL 事务的 ACID 特性
|
4月前
|
关系型数据库 MySQL 数据安全/隐私保护
MySQL8.1.0版本正式发布带来哪些新特性?
MySQL8.1.0版本正式发布带来哪些新特性?
234 0
MySQL8.1.0版本正式发布带来哪些新特性?
|
2月前
|
SQL 关系型数据库 MySQL
Mysql事务隔离级别和锁特性
Mysql事务隔离级别和锁特性
|
4月前
|
SQL 关系型数据库 MySQL
⑨【MySQL事务】事务开启、提交、回滚,事务特性ACID,脏读、幻读、不可重复读。
⑨【MySQL事务】事务开启、提交、回滚,事务特性ACID,脏读、幻读、不可重复读。
33 0
|
4月前
|
存储 SQL 关系型数据库
MySQL8.0新特性与旧特性移除总结
MySQL从5.7版本直接跳跃发布了8.0版本 ,可见这是一个令人兴奋的里程碑版本。MySQL 8版本在功能上做了显著的改进与增强,开发者对MySQL的源代码进行了重构,最突出的一点是对MySQL Optimizer优化器进行了改进。不仅在速度上得到了改善,还为用户带来了更好的性能和更棒的体验。
120 1
|
27天前
|
存储 缓存 关系型数据库
MySQL事务的四大特性是如何保证的
在MySQL数据库中还有一种二进制日志,其用来基于时间点的还原及主从复制。从表面上来看其和重做日志非常相似,都是记录了对于数据库操作的日志。但是,从本质上来看有着非常大的不同。
13 1
|
1月前
|
SQL 关系型数据库 MySQL
深入理解MySQL事务特性:保证数据完整性与一致性
深入理解MySQL事务特性:保证数据完整性与一致性
90 1
|
1月前
|
存储 安全 关系型数据库
MySQL 临时表的用法和特性
MySQL 临时表的用法和特性
|
1月前
|
关系型数据库 MySQL 测试技术
数据库专家带你体验PolarDB MySQL版 Serverless的极致弹性特性!
本次基于阿里云瑶池数据库解决方案体验馆,带你体验PolarDB MySQL Serverless形态下的性能压测环境,基于可选择的标准压测工具进行压测,构造弹性场景进行压测,实时动态展示弹性能力、价格和性价比结果,压测环境可开放定制修改、可重复验证。参与活动即有机会获得鼠标、小米打印机、卫衣等精美礼品。
数据库专家带你体验PolarDB MySQL版 Serverless的极致弹性特性!