mysql群集搭建案例解析

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介:

Mysql cluster技术概览

wKiom1g2jhjDhubiAAHNYCLGxHk871.png-wh_50 

DB Management Server:管理服务器主要用于管理cluster中的其他类型节点(Data Node和SQL Node),通过它可以配置Node信息,启动和停止Node。 SQL Node:在MySQL Cluster中,一个SQL Node就是一个使用NDB引擎的mysql server进程,用于供外部应用提供集群数据的访问入口。Data Node:用于存储集群数据;系统会尽量将数据放在内存中。

 

 Cluster只支持nbd这种存储引擎,对内存要求很高,在建表的时候必须要指定存储引擎为nbd

 

Mysql cluster安装

实验拓扑

管理机 ip 10.1  id 1  process ndb_mgmd

Sql1   10.10     10          mysqld

Sql2   10.11     11          mysqld

Data1  10.20     20          ndbd

Data2  10.21     21          ndbd

 

 

初始配置(所有节点)

Ip,iptables,selinux,hosts

 

Sql nodes   只有这节点需要安装mysql,群集软件就行了

Data nodes      只需要拷贝一个进程文件过来就行了

Managemnet nodes 只需要拷贝一个进程文件过来就行了

 

 

 

 

Mysql cluster初始配置

Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

 

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

 

 

测试二:停用master数据节点

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭及重启

 

 

 

实操演练:

安装前初始化工作:

Ip,iptables,selinux,hosts

 

一定保障每一个节点都没有相应的mysql进程在运行,并且不能在开机自启动

Ps aux|grep mysql

Kill -9 对应的进程号

Chkconfig msyqld off

Mv /etc/my.cnf /etc/my.cnf.old   //保障不要让以前的配置文件干扰影响新配置文件

 

 

安装群集软件,只需要在sql节点安装即可

Sqlsql2

将下载好的软件拷贝到sql节点电脑上,最好下载二进制包,直接解压创建一些对应的目录就可以使用了

 

Tar -xzf  mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64.tar.gz -C /usr/local

Ln -s /usr/local/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64/ /usr/lcoal/mysql  //做连接是为了便于管理

 

Cd /usr/lcoal/mysql-cluster   //因为sql节点需要接受用户的访问,所以需要做数据库初始化工作和创建授权表

Ls

Scripts/mysql_install_db  --user=mysql  //初始化

Chown -R root

Chown -R mysql data

Chgrp -R  mysql  //改为除data目录外所有目录属主为root,属组为mysql

Cp support-files/mysql.server /etc/rc.d/init.d/mysqld

Chkconfig  --add mysqld

Chkconifg mysqld on   //注意现在不能启动,因为启动是有顺序的,到此为止sql节点安装完成

 

 

Data节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.20:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.21:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.20:/usr/local/bin/  //多线程进程

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.21:/usr/local/bin/

 

 

data节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb*

 

 

管理节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndb_mgm*  192.168.10.1:/usr/local/bin/

 

在管理节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb_mgm*

Mkdir -p /usr/local/mysql/mysql-cluster  //这个目录用来存放日志信息的

 

 

配置Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

Sql上配置

Vim /etc/my.cnf  //这是一个新文件,其实就是告诉它以mysqldNdbcluster

存储引擎方式启动,告诉它管理节点是谁就可以了

[mysqld]

Ndbcluster

 

[mysql_cluster]

Ndb_connectstring=192.168.10.1

 

保存退出

 

Cd  /   //将配置文件分别拷贝到其他服务器节点就可以了

Rsync -av /etc/my.cnf 192.168.10.11:/etc/

Rsync -av /etc/my.cnf 192.168.10.20:/etc/

Rsync -av /etc/my.cnf 192.168.10.21:/etc/

 

 

 

管理节点配置

Mkdir /var/lib/mysql-cluster   //用来存放配置目录的

Cd /var/lib/mysql-cluster  //进入到这个目录创建一个ini文件

Vim config.ini  配置一个数据节点的数量,定义数据节点的内存大小,索引所使用的内存,tcp对外提供服务的端口,加上所有节点信息

NoOfReplicas=2

DataMemory=100M

IndexMemory=100M

 

[tcp_default]

Portnumber=3306

 

[ndb_mgmd]

Id=1

Hostname=192.168.10.1

Datadir=/var/lib/mysql-cluster     //存放日志

 

[ndbd]

Id=20

Hostname=192.168.10.20

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

 

[ndbd]

Id=21

Hostname=192.168.10.21

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

[mysqld]

Id=10

Hostname=192.168.10.10

 

 

[mysqld]

Id=10

Hostname=192.168.10.11

 

保存退出

 

data节点上创建刚才管理节点上配置文件中的文件

data节点上操作

Mkdir -p /usr/local/mysql/data

 

 

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

在管理节点上:

ndb_mgmd -f /var/lib/mysql-cluster/config.ini

数据节点:ndnd

Sql节点:service mysqld start

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

Grant all *.* to root@% identtified by 123;   //创建授权账号

 

客户端测试

Mysql -h 192.168.10.10 -uroot -p123

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Create database bbs;

Create table bbs.t1(id int,name varchar(30));

Alter tabel bbs.t1 engine=nbdcluster;  //存储引擎必须是nbdcluster

Insert into bbs.t1 values(1,luliechu);

 

然后连接到另一台主机上看一下数据是否是一致的

Mysql -h 192.168.10.11 -uroot -p123

Select * from bbs.t1

 

 

 

 

 

测试二:停用master数据节点

Ndb_mgm

Show

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭的顺序跟启动的时候刚好相反及重启

管理节点 ndb_mgm -e shutdown   //关闭整个集群

数据节点

Sql节点

 

 

 

注意事项:所有群集节点都不要安装和启动mysql server

本文转自    探花无情   51CTO博客,原文链接:http://blog.51cto.com/983865387/1876164


相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
6月前
|
SQL 关系型数据库 MySQL
Mysql数据恢复—Mysql数据库delete删除后数据恢复案例
本地服务器,操作系统为windows server。服务器上部署mysql单实例,innodb引擎,独立表空间。未进行数据库备份,未开启binlog。 人为误操作使用Delete命令删除数据时未添加where子句,导致全表数据被删除。删除后未对该表进行任何操作。需要恢复误删除的数据。 在本案例中的mysql数据库未进行备份,也未开启binlog日志,无法直接还原数据库。
|
7月前
|
存储 SQL 关系型数据库
MySQL中binlog、redolog与undolog的不同之处解析
每个都扮演回答回溯与错误修正机构角色: BinLog像历史记载员详细记载每件大大小小事件; RedoLog则像紧急救援队伍遇见突發情況追踪最后活动轨迹尽力补救; UndoLog就类似时间机器可倒带历史让一切归位原始样貌同时兼具平行宇宙观察能让多人同时看见各自期望看见历程而互不干扰.
356 9
|
8月前
|
存储 SQL 关系型数据库
MySQL 核心知识与索引优化全解析
本文系统梳理了 MySQL 的核心知识与索引优化策略。在基础概念部分,阐述了 char 与 varchar 在存储方式和性能上的差异,以及事务的 ACID 特性、并发事务问题及对应的隔离级别(MySQL 默认 REPEATABLE READ)。 索引基础部分,详解了 InnoDB 默认的 B+tree 索引结构(多路平衡树、叶子节点存数据、双向链表支持区间查询),区分了聚簇索引(数据与索引共存,唯一)和二级索引(数据与索引分离,多个),解释了回表查询的概念及优化方法,并分析了 B+tree 作为索引结构的优势(树高低、效率稳、支持区间查询)。 索引优化部分,列出了索引创建的六大原则
186 2
|
8月前
|
存储 SQL 关系型数据库
MySQL 核心知识与性能优化全解析
我整理的这份内容涵盖了 MySQL 诸多核心知识。包括查询语句的书写与执行顺序,多表查询的连接方式及内、外连接的区别。还讲了 CHAR 和 VARCHAR 的差异,索引的类型、底层结构、聚簇与非聚簇之分,以及回表查询、覆盖索引、左前缀原则和索引失效情形,还有建索引的取舍。对比了 MyISAM 和 InnoDB 存储引擎的不同,提及性能优化的多方面方法,以及超大分页处理、慢查询定位与分析等,最后提到了锁和分库分表可参考相关资料。
181 0
|
9月前
|
关系型数据库 MySQL
MySQL字符串拼接方法全解析
本文介绍了四种常用的字符串处理函数及其用法。方法一:CONCAT,用于基础拼接,参数含NULL时返回NULL;方法二:CONCAT_WS,带分隔符拼接,自动忽略NULL值;方法三:GROUP_CONCAT,适用于分组拼接,支持去重、排序和自定义分隔符;方法四:算术运算符拼接,仅适用于数值类型,字符串会尝试转为数值处理。通过示例展示了各函数的特点与应用场景。
|
NoSQL Java Linux
《docker高级篇(大厂进阶):2.DockerFile解析》包括:是什么、DockerFile构建过程解析、DockerFile常用保留字指令、案例、小总结
《docker高级篇(大厂进阶):2.DockerFile解析》包括:是什么、DockerFile构建过程解析、DockerFile常用保留字指令、案例、小总结
559 76
|
11月前
|
关系型数据库 MySQL 大数据
大数据新视界--大数据大厂之MySQL 数据库课程设计:MySQL 数据库 SQL 语句调优的进阶策略与实际案例(2-2)
本文延续前篇,深入探讨 MySQL 数据库 SQL 语句调优进阶策略。包括优化索引使用,介绍多种索引类型及避免索引失效等;调整数据库参数,如缓冲池、连接数和日志参数;还有分区表、垂直拆分等其他优化方法。通过实际案例分析展示调优效果。回顾与数据库课程设计相关文章,强调全面认识 MySQL 数据库重要性。为读者提供综合调优指导,确保数据库高效运行。
|
12月前
|
开发框架 .NET 中间件
.net8 使用 license 证书授权案例解析
本文介绍了如何使用 `.NET CLI` 创建并改造一个 `ASP.NET Core Web API` 项目,以实现基于许可证的授权机制。具体步骤包括创建项目、添加必要的 NuGet 包(如 `Standard.Licensing` 和 `Swashbuckle.AspNetCore`),以及修改 `Program.cs` 文件以集成自定义的许可证验证中间件。项目结构中新增了 `LicenseController` 接口用于处理授权相关操作,并通过测试流程验证了默认天气接口在未授权和授权状态下的响应情况。整个过程确保了应用程序能够在启动时正确验证许可证,保障系统的安全性与可控性。
582 9
.net8 使用 license 证书授权案例解析
|
11月前
|
SQL 运维 关系型数据库
MySQL Binlog 日志查看方法及查看内容解析
本文介绍了 MySQL 的 Binlog(二进制日志)功能及其使用方法。Binlog 记录了数据库的所有数据变更操作,如 INSERT、UPDATE 和 DELETE,对数据恢复、主从复制和审计至关重要。文章详细说明了如何开启 Binlog 功能、查看当前日志文件及内容,并解析了常见的事件类型,包括 Format_desc、Query、Table_map、Write_rows、Update_rows 和 Delete_rows 等,帮助用户掌握数据库变化历史,提升维护和排障能力。
|
存储 SQL 关系型数据库
服务器数据恢复—云服务器上mysql数据库数据恢复案例
某ECS网站服务器,linux操作系统+mysql数据库。mysql数据库采用innodb作为默认存储引擎。 在执行数据库版本更新测试时,操作人员误误将在本来应该在测试库执行的sql脚本在生产库上执行,导致生产库上部分表被truncate,还有部分表中少量数据被delete。
315 25

推荐镜像

更多