mysql群集搭建案例解析

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
全局流量管理 GTM,标准版 1个月
简介:

Mysql cluster技术概览

wKiom1g2jhjDhubiAAHNYCLGxHk871.png-wh_50 

DB Management Server:管理服务器主要用于管理cluster中的其他类型节点(Data Node和SQL Node),通过它可以配置Node信息,启动和停止Node。 SQL Node:在MySQL Cluster中,一个SQL Node就是一个使用NDB引擎的mysql server进程,用于供外部应用提供集群数据的访问入口。Data Node:用于存储集群数据;系统会尽量将数据放在内存中。

 

 Cluster只支持nbd这种存储引擎,对内存要求很高,在建表的时候必须要指定存储引擎为nbd

 

Mysql cluster安装

实验拓扑

管理机 ip 10.1  id 1  process ndb_mgmd

Sql1   10.10     10          mysqld

Sql2   10.11     11          mysqld

Data1  10.20     20          ndbd

Data2  10.21     21          ndbd

 

 

初始配置(所有节点)

Ip,iptables,selinux,hosts

 

Sql nodes   只有这节点需要安装mysql,群集软件就行了

Data nodes      只需要拷贝一个进程文件过来就行了

Managemnet nodes 只需要拷贝一个进程文件过来就行了

 

 

 

 

Mysql cluster初始配置

Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

 

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

 

 

测试二:停用master数据节点

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭及重启

 

 

 

实操演练:

安装前初始化工作:

Ip,iptables,selinux,hosts

 

一定保障每一个节点都没有相应的mysql进程在运行,并且不能在开机自启动

Ps aux|grep mysql

Kill -9 对应的进程号

Chkconfig msyqld off

Mv /etc/my.cnf /etc/my.cnf.old   //保障不要让以前的配置文件干扰影响新配置文件

 

 

安装群集软件,只需要在sql节点安装即可

Sqlsql2

将下载好的软件拷贝到sql节点电脑上,最好下载二进制包,直接解压创建一些对应的目录就可以使用了

 

Tar -xzf  mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64.tar.gz -C /usr/local

Ln -s /usr/local/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64/ /usr/lcoal/mysql  //做连接是为了便于管理

 

Cd /usr/lcoal/mysql-cluster   //因为sql节点需要接受用户的访问,所以需要做数据库初始化工作和创建授权表

Ls

Scripts/mysql_install_db  --user=mysql  //初始化

Chown -R root

Chown -R mysql data

Chgrp -R  mysql  //改为除data目录外所有目录属主为root,属组为mysql

Cp support-files/mysql.server /etc/rc.d/init.d/mysqld

Chkconfig  --add mysqld

Chkconifg mysqld on   //注意现在不能启动,因为启动是有顺序的,到此为止sql节点安装完成

 

 

Data节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.20:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.21:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.20:/usr/local/bin/  //多线程进程

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.21:/usr/local/bin/

 

 

data节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb*

 

 

管理节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndb_mgm*  192.168.10.1:/usr/local/bin/

 

在管理节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb_mgm*

Mkdir -p /usr/local/mysql/mysql-cluster  //这个目录用来存放日志信息的

 

 

配置Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

Sql上配置

Vim /etc/my.cnf  //这是一个新文件,其实就是告诉它以mysqldNdbcluster

存储引擎方式启动,告诉它管理节点是谁就可以了

[mysqld]

Ndbcluster

 

[mysql_cluster]

Ndb_connectstring=192.168.10.1

 

保存退出

 

Cd  /   //将配置文件分别拷贝到其他服务器节点就可以了

Rsync -av /etc/my.cnf 192.168.10.11:/etc/

Rsync -av /etc/my.cnf 192.168.10.20:/etc/

Rsync -av /etc/my.cnf 192.168.10.21:/etc/

 

 

 

管理节点配置

Mkdir /var/lib/mysql-cluster   //用来存放配置目录的

Cd /var/lib/mysql-cluster  //进入到这个目录创建一个ini文件

Vim config.ini  配置一个数据节点的数量,定义数据节点的内存大小,索引所使用的内存,tcp对外提供服务的端口,加上所有节点信息

NoOfReplicas=2

DataMemory=100M

IndexMemory=100M

 

[tcp_default]

Portnumber=3306

 

[ndb_mgmd]

Id=1

Hostname=192.168.10.1

Datadir=/var/lib/mysql-cluster     //存放日志

 

[ndbd]

Id=20

Hostname=192.168.10.20

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

 

[ndbd]

Id=21

Hostname=192.168.10.21

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

[mysqld]

Id=10

Hostname=192.168.10.10

 

 

[mysqld]

Id=10

Hostname=192.168.10.11

 

保存退出

 

data节点上创建刚才管理节点上配置文件中的文件

data节点上操作

Mkdir -p /usr/local/mysql/data

 

 

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

在管理节点上:

ndb_mgmd -f /var/lib/mysql-cluster/config.ini

数据节点:ndnd

Sql节点:service mysqld start

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

Grant all *.* to root@% identtified by 123;   //创建授权账号

 

客户端测试

Mysql -h 192.168.10.10 -uroot -p123

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Create database bbs;

Create table bbs.t1(id int,name varchar(30));

Alter tabel bbs.t1 engine=nbdcluster;  //存储引擎必须是nbdcluster

Insert into bbs.t1 values(1,luliechu);

 

然后连接到另一台主机上看一下数据是否是一致的

Mysql -h 192.168.10.11 -uroot -p123

Select * from bbs.t1

 

 

 

 

 

测试二:停用master数据节点

Ndb_mgm

Show

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭的顺序跟启动的时候刚好相反及重启

管理节点 ndb_mgm -e shutdown   //关闭整个集群

数据节点

Sql节点

 

 

 

注意事项:所有群集节点都不要安装和启动mysql server

本文转自    探花无情   51CTO博客,原文链接:http://blog.51cto.com/983865387/1876164


相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
打赏
0
0
0
0
95
分享
相关文章
MySQL原理简介—6.简单的生产优化案例
本文介绍了数据库和存储系统的几个主题: 1. **MySQL日志的顺序写和数据文件的随机读指标**:解释了磁盘随机读和顺序写的原理及对数据库性能的影响。 2. **Linux存储系统软件层原理及IO调度优化原理**:解析了Linux存储系统的分层架构,包括VFS、Page Cache、IO调度等,并推荐使用deadline算法优化IO调度。 3. **数据库服务器使用的RAID存储架构**:介绍了RAID技术的基本概念及其如何通过多磁盘阵列提高存储容量和数据冗余性。 4. **数据库Too many connections故障定位**:分析了MySQL连接数限制问题的原因及解决方法。
111 23
深入解析MySQL的EXPLAIN:指标详解与索引优化
MySQL 中的 `EXPLAIN` 语句用于分析和优化 SQL 查询,帮助你了解查询优化器的执行计划。本文详细介绍了 `EXPLAIN` 输出的各项指标,如 `id`、`select_type`、`table`、`type`、`key` 等,并提供了如何利用这些指标优化索引结构和 SQL 语句的具体方法。通过实战案例,展示了如何通过创建合适索引和调整查询语句来提升查询性能。
706 9
MySQL Binlog 日志查看方法及查看内容解析
本文介绍了 MySQL 的 Binlog(二进制日志)功能及其使用方法。Binlog 记录了数据库的所有数据变更操作,如 INSERT、UPDATE 和 DELETE,对数据恢复、主从复制和审计至关重要。文章详细说明了如何开启 Binlog 功能、查看当前日志文件及内容,并解析了常见的事件类型,包括 Format_desc、Query、Table_map、Write_rows、Update_rows 和 Delete_rows 等,帮助用户掌握数据库变化历史,提升维护和排障能力。
.net8 使用 license 证书授权案例解析
本文介绍了如何使用 `.NET CLI` 创建并改造一个 `ASP.NET Core Web API` 项目,以实现基于许可证的授权机制。具体步骤包括创建项目、添加必要的 NuGet 包(如 `Standard.Licensing` 和 `Swashbuckle.AspNetCore`),以及修改 `Program.cs` 文件以集成自定义的许可证验证中间件。项目结构中新增了 `LicenseController` 接口用于处理授权相关操作,并通过测试流程验证了默认天气接口在未授权和授权状态下的响应情况。整个过程确保了应用程序能够在启动时正确验证许可证,保障系统的安全性与可控性。
75 8
.net8 使用 license 证书授权案例解析
技术革新下的培训新趋势:案例解析
从最初的“试试看”,到如今的“非做不可”,企业培训已经成为央国企和上市公司不可或缺的战略环节。无论是AI与大模型的赋能,DeepSeek,还是具身智能、智算技术和数据科学的实战应用,这些课程都在为企业打开新的可能性。
服务器数据恢复—云服务器上mysql数据库数据恢复案例
某ECS网站服务器,linux操作系统+mysql数据库。mysql数据库采用innodb作为默认存储引擎。 在执行数据库版本更新测试时,操作人员误误将在本来应该在测试库执行的sql脚本在生产库上执行,导致生产库上部分表被truncate,还有部分表中少量数据被delete。
87 25
|
4月前
|
《docker高级篇(大厂进阶):2.DockerFile解析》包括:是什么、DockerFile构建过程解析、DockerFile常用保留字指令、案例、小总结
《docker高级篇(大厂进阶):2.DockerFile解析》包括:是什么、DockerFile构建过程解析、DockerFile常用保留字指令、案例、小总结
338 76
数据库数据恢复——MySQL简介和数据恢复案例
MySQL数据库数据恢复环境&故障: 本地服务器,安装的windows server操作系统。 操作系统上部署MySQL单实例,引擎类型为innodb,表空间类型为独立表空间。该MySQL数据库没有备份,未开启binlog。 人为误操作,在用Delete命令删除数据时未添加where子句进行筛选导致全表数据被删除,删除后未对该表进行任何操作。
MySQL原理简介—11.优化案例介绍
本文介绍了四个SQL性能优化案例,涵盖不同场景下的问题分析与解决方案: 1. 禁止或改写SQL避免自动半连接优化。 2. 指定索引避免按聚簇索引全表扫描大表。 3. 按聚簇索引扫描小表减少回表次数。 4. 避免产生长事务长时间执行。
【23种设计模式·全精解析 | 行为型模式篇】11种行为型模式的结构概述、案例实现、优缺点、扩展对比、使用场景、源码解析
行为型模式用于描述程序在运行时复杂的流程控制,即描述多个类或对象之间怎样相互协作共同完成单个对象都无法单独完成的任务,它涉及算法与对象间职责的分配。行为型模式分为类行为模式和对象行为模式,前者采用继承机制来在类间分派行为,后者采用组合或聚合在对象间分配行为。由于组合关系或聚合关系比继承关系耦合度低,满足“合成复用原则”,所以对象行为模式比类行为模式具有更大的灵活性。 行为型模式分为: • 模板方法模式 • 策略模式 • 命令模式 • 职责链模式 • 状态模式 • 观察者模式 • 中介者模式 • 迭代器模式 • 访问者模式 • 备忘录模式 • 解释器模式
【23种设计模式·全精解析 | 行为型模式篇】11种行为型模式的结构概述、案例实现、优缺点、扩展对比、使用场景、源码解析

热门文章

最新文章

推荐镜像

更多