MySQL集群简介与配置详解

本文涉及的产品
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
RDS AI 助手,专业版
简介:

1. 先了解一下你是否应该用MySQL集群。

减少数据中心结点压力和大数据量处理,采用把MySQL分布,一个或多个application对应一个MySQL数据库。把几个MySQL数据库公用的数据做出共享数据,例如购物车,用户对象等等,存在数据结点里面。其他不共享的数据还维持在各自分布的MySQL数据库本身中。

MySQL Cluster Components

2. 集群MySQL中名称概念.(如上图)

1)Sql结点(SQL node--上图对应为MySQLd):分布式数据库。包括自身数据和查询中心结点数据.

2)数据结点(Data node -- ndbd):集群共享数据(内存中).

3)管理服务器(Management Server – ndb_mgmd):集群管理SQL node,Data node.

3.配置

MySQL-max版本,当然现在MySQL集群系统windonws平台上面不被支持.

安装MySQL就不多说了,网上一大堆,简明扼要。

A:192.168.1.251 – Data node和Management Server.

B:192.168.1.254 – SQL node.

当然,你也可以让一个机器同时为3者。

A,B my.inf加上:

[MySQLD]                         
                   #  
 # location of MGM node  
   
# Options for ndbd process:  
[MySQL_CLUSTER]                  
 # location of MGM node  
   
A: /var/lib/MySQL-cluster/config.ini  
     
NoOfReplicas=1   #
DataMemory=80M   # How much memory to allocate for data storage  
IndexMemory=18M  # How much memory to allocate for index storage  
                 # For DataMemory and IndexMemory, we have used the  
                 # default values. Since the "world" database takes up  
                 # only about 500KB, this should be more than enough for  
                 # this example Cluster setup.  
# TCP/IP options:  
[TCP DEFAULT]      
portnumber=2202  # This the default; however, you can use any  
                 # port that is free for all the hosts in cluster  
                 # Note: It is recommended beginning with MySQL 5.0 that  
                 # you do not specify the portnumber at all and simply allow  
                 # the default value to be used instead  
# Management process options:  
                      
hostname=192.168.1.251          # Hostname or IP address of MGM node  
 # Directory for MGM node logfiles  
# Options for data node "A":  
[NDBD]                           
# (one [NDBD] section per data node)  
hostname=192.168.1.251          # Hostname or IP address  
  # Directory for this data node's datafiles  
# SQL node options:  
[MySQLD]  
hostname=192.168.1.254  
#[MySQLD] #这个相当于192.168.1.251

4. 启动测试

在管理服务器上面(这里是192.168.1.251):

shell>

在数据结点服务器上面(依然是192.168.1.251and more):

shell>

SQL结点服务器上面(192.168.1.254):

shell>

在251上面察看

./ndb_mgm   -- NDB Cluster -- Management Client --  
ndb_mgm> show  
Connected to Management Server at: 192.168.1.251:1186  Cluster Configuration  ---------------------  
[ndbd(NDB)]    
1 node(s)  id=2   @192.168.1.251 (Version:5.0.22, Nodegroup: 0, Master)     
[ndb_mgmd(MGM)] 
1 node(s)  id=1   @192.168.1.251 (Version:5.0.22)     
[MySQLd(API)]  
1 node(s)  id=3   @192.168.1.254 (Version:5.0.22)

ok

关闭集群:

shell>

5.基本的集群说明

1)在MySQL集群中.当table引擎为NDBCLUSTER时才做集群,其他非NDBCLUSTER表和一般MySQL数据库表一样,不会共享数据. NDBCLUSTER表数据存储在Data node服务器内存中,Data Node可以为1台或多台服务器,它们之间存放共享数据。Data Node服务器可以分组数据copy。

例如:2,3,4,5为四台Data Node服务器ID. 2,3为组0。 4,5为组1。 2,3维持数据相同,4,5维持数据相同。 组0和组1维持数据不同。

2)sql node服务器中,非NDBCLUSTER数据存在本身数据库中,table引擎为NDBCLUSTER时,数据存储在Data Node中。当查询NDBCLUSTER表时,它会从Data node集群中提起数据.

3)Manager server

管理SQl node和Data node状态。

6深入了解

http://dev.MySQL.com/doc/refman/5.0/en/ndbcluster.html





一、介绍


这篇文档旨在介绍如何安装配置基于2台服务器的MySQL数据库集群。并且实现任意一台服务器出现问题或宕机时MySQL依然能够继续运行。


注意!


虽然这是基于2台服务器的MySQL集群,但也必须有额外的第三台服务器作为管理节点,但这台服务器可以在

集群启动完成后关闭。同时需要注意的是 并不推荐在集群启动完成后关闭作为管理节点的服务器。尽管理

论上可以建立基于只有2台服务器的MySQL集群,但是这样的架构,一旦一台服务器宕机之后集 群就无法继

续正常工作了,这样也就失去了集群的意义了。出于这个原因,就需要有第三台服务器作为管理节点运行。


另外,可能很多朋友都没有3台服务器的实际环境,可以考虑在VMWare或其他虚拟机中进行实验。


下面假设这3台服务的情况:


Server1: mysql1.vmtest.net 192.168.0.1   

Server2: mysql2.vmtest.net 192.168.0.2   

Server3: mysql3.vmtest.net 192.168.0.3  


Servers1和Server2作为实际配MySQL数据库集群的服务器。对于作为管理节点的Server3则要求较低,只需

对Server3的系 统进行很小的调整并且无需安装MySQL,Server3可以使用一台配置较低的计算机并且可以在

Server3同时运行其他服务。


二、在Server1和Server2上安装MySQL


注意:必须是max版本的MySQL,Standard版本不支持集群部署!


以下步骤需要在Server1和Server2上各做一次

安装mysql

# mv mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz /usr/local/   

# cd /usr/local/   

# groupadd mysql   

# useradd -g mysql mysql   

# tar -zxvf mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz   

# rm -f mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz   

# mv mysql-max-4.1.9-pc-linux-gnu-i686 mysql   

# cd mysql   

scripts/mysql_install_db --user=mysql   

# chown -R root .   

# chown -R mysql data   

# chgrp -R mysql .   

cp support-files/mysql.server /etc/rc.d/init.d/mysqld   


# chmod +x /etc/rc.d/init.d/mysqld   


chkconfig --add mysqld  


此时不要启动MySQL!


三、安装并配置管理节点服务器(Server3)


作为管理节点服务器,Server3需要ndb_mgm和ndb_mgmd两个文件:


从http://www.mysql.com上下载mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz


# mkdir /usr/src/mysql-mgm 

  

# cd /usr/src/mysql-mgm  

 

# tar -zxvf mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz 

  

# rm mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz   


# cd mysql-max-4.1.9-pc-linux-gnu-i686   


# mv bin/ndb_mgm .   

# mv bin/ndb_mgmd .   

# chmod +x ndb_mg*   

# mv ndb_mg* /usr/bin/   

# cd   

# rm -rf /usr/src/mysql-mgm  

现在开始为这台管理节点服务器建立配置文件:


mkdir /var/lib/mysql-cluster   

# cd /var/lib/mysql-cluster   

# vi config.ini  

在config.ini中添加如下内容:


[NDBD DEFAULT]  

 

NoOfReplicas=2   


[MYSQLD DEFAULT]  

 

[NDB_MGMD DEFAULT] 

  

[TCP DEFAULT]  

 

# Managment Server 

  

[NDB_MGMD]  


HostName=192.168.0.3 #管理节点服务器Server3的IP地址


# Storage Engines  

 

[NDBD]   


HostName=192.168.0.1 #MySQL数据库集群Server1的IP地址   


DataDir= /var/lib/mysql-cluster   


[NDBD]   


HostName=192.168.0.2 #MySQL集群Server2的IP地址  

 

DataDir=/var/lib/mysql-cluster  


以下2个[MYSQLD]可以填写Server1和Server2的主机名。


但为了能够更快的更换集群中的服务器,推荐留空,否则更换服务器后必须对这个配置进行更改。


[MYSQLD]   

[MYSQLD]  

保存退出后,启动管理节点服务器Server3:


# ndb_mgmd  

启动管理节点后应该注意,这只是管理节点服务,并不是管理终端。因而你看不到任何关于启动后的输出信息。


四、配置集群服务器并启动MySQL


在Server1和Server2中都需要进行如下改动:


vi /etc/my.cnf 

  

[mysqld]   


ndbcluster   


ndb-connectstring=192.168.0.3 #Server3的IP地址   


[mysql_cluster]   


ndb-connectstring=192.168.0.3 #Server3的IP地址   


保存退出后,建立数据目录并启动MySQL:


# mkdir /var/lib/mysql-cluster   

# cd /var/lib/mysql-cluster   


/usr/local/mysql/bin/ndbd --initial   


# /etc/rc.d/init.d/mysqld start  


可以把/usr/local/mysql/bin/ndbd加到/etc/rc.local中实现开机启动


注意:只有在第一次启动ndbd时或者对Server3的config.ini进行改动后才需要使用--initial参数!


五、检查工作状态


回到管理节点服务器Server3上,并启动管理终端:


# /usr/bin/ndb_mgm  

键入show命令查看当前工作状态:(下面是一个状态输出示例)


[root@mysql3 root]# /usr/bin/ndb_mgm   

-- NDB Cluster -- Management Client --   

ndb_mgm> show   

Connected to Management Server at: localhost:1186   

Cluster Configuration   

[ndbd(NDB)] 2 node(s)   

id=2 @192.168.0.1 (Version: 4.1.9, Nodegroup: 0, Master)   

id=3 @192.168.0.2 (Version: 4.1.9, Nodegroup: 0)   

[ndb_mgmd(MGM)] 1 node(s)   

id=1 @192.168.0.3 (Version: 4.1.9)   

[mysqld(API)] 2 node(s)   

id=4 (Version: 4.1.9)   

id=5 (Version: 4.1.9)   

ndb_mgm>   

如果上面没有问题,现在开始测试MySQL: 

注意,这篇文档对于MySQL并没有设置root密码,推荐你自己设置Server1和Server2的MySQL root密码。


在Server1中:


# /usr/local/mysql/bin/mysql -u root -p   

> use test;   

> CREATE TABLE ctest (i INT) ENGINE=NDBCLUSTER;   

> INSERT INTO ctest () VALUES (1);   

> SELECT * FROM ctest;  

应该可以看到1 row returned信息(返回数值1)。


如果上述正常,则换到Server2上重复上面的测试,观察效果。如果成功,则在Server2中执行INSERT再换回到Server1观察是否工作正常。 

如果都没有问题,那么恭喜成功!


六、破坏性测试


将Server1或Server2的网线拔掉,观察另外一台MySQL数据库集群服务器工作是否正常(可以使用SELECT查询测试)。测试完毕后,重新插入网线即可。


如果你接触不到物理服务器,也就是说不能拔掉网线,那也可以这样测试: 

在Server1或Server2上:


# ps aux | grep ndbd  

将会看到所有ndbd进程信息:


root 5578 0.0 0.3 6220 1964 ? S 03:14 0:00 ndbd   

root 5579 0.0 20.4 492072 102828 ? R 03:14 0:04 ndbd   

root 23532 0.0 0.1 3680 684 pts/1 S 07:59 0:00 grep ndbd  

然后杀掉一个ndbd进程以达到破坏MySQL集群服务器的目的:


# kill -9 5578 5579  

之后在另一台集群服务器上使用SELECT查询测试。并且在管理节点服务器的管理终端中执行show命令会看到被破坏的那台服务器的状态。 

测试完成后,只需要重新启动被破坏服务器的ndbd进程即可:


# ndbd  

注意!前面说过了,此时是不用加--inital参数的!


至此,MySQL数据库集群就配置完成了! 










本文转自 chengxuyonghu 51CTO博客,原文链接:http://blog.51cto.com/6226001001/1722068,如需转载请自行联系原作者
相关实践学习
自建数据库迁移到云数据库
本场景将引导您将网站的自建数据库平滑迁移至云数据库RDS。通过使用RDS,您可以获得稳定、可靠和安全的企业级数据库服务,可以更加专注于发展核心业务,无需过多担心数据库的管理和维护。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
目录
相关文章
|
11月前
|
负载均衡 算法 关系型数据库
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
本文聚焦 MySQL 集群架构中的负载均衡算法,阐述其重要性。详细介绍轮询、加权轮询、最少连接、加权最少连接、随机、源地址哈希等常用算法,分析各自优缺点及适用场景。并提供 Java 语言代码实现示例,助力直观理解。文章结构清晰,语言通俗易懂,对理解和应用负载均衡算法具有实用价值和参考价值。
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
|
6月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
721 6
|
关系型数据库 MySQL Java
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
|
7月前
|
Ubuntu 安全 关系型数据库
安装与配置MySQL 8 on Ubuntu,包括权限授予、数据库备份及远程连接指南
以上步骤提供了在Ubuntu上从头开始设置、配置、授权、备份及恢复一个基础但完整的MySQL环境所需知识点。
753 7
|
7月前
|
SQL 监控 关系型数据库
查寻MySQL或SQL Server的连接数,并配置超时时间和最大连接量
以上步骤提供了直观、实用且易于理解且执行的指导方针来监管和优化数据库服务器配置。务必记得,在做任何重要变更前备份相关配置文件,并确保理解每个参数对系统性能可能产生影响后再做出调节。
697 11
|
12月前
|
Ubuntu 关系型数据库 MySQL
在Ubuntu 22.04上配置和安装MySQL
以上就是在Ubuntu 22.04上配置和安装MySQL的步骤。这个过程可能看起来有点复杂,但只要按照步骤一步步来,你会发现其实并不难。记住,任何时候都不要急于求成,耐心是解决问题的关键。
1333 31
|
11月前
|
存储 SQL 关系型数据库
MySQL存储引擎简介
在选择相应的存储引擎时,需要充分考虑实际业务场景、性能需求和数据一致性要求,从而为数据管理提供最佳支持。
494 17
|
11月前
|
关系型数据库 MySQL Java
安装和配置JDK、Tomcat、MySQL环境,以及如何在Linux下更改后端端口。
遵循这些步骤,你可以顺利完成JDK、Tomcat、MySQL环境的安装和配置,并在Linux下更改后端端口。祝你顺利!
604 11
|
12月前
|
关系型数据库 MySQL Linux
CentOS 7系统下详细安装MySQL 5.7的步骤:包括密码配置、字符集配置、远程连接配置
以上就是在CentOS 7系统下安装MySQL 5.7的详细步骤。希望这个指南能帮助你顺利完成安装。
2907 26
|
12月前
|
负载均衡 算法 关系型数据库
大数据新视界--大数据大厂之MySQL数据库课程设计:MySQL集群架构负载均衡故障排除与解决方案
本文深入探讨 MySQL 集群架构负载均衡的常见故障及排除方法。涵盖请求分配不均、节点无法响应、负载均衡器故障等现象,介绍多种负载均衡算法及故障排除步骤,包括检查负载均衡器状态、调整算法、诊断修复节点故障等。还阐述了预防措施与确保系统稳定性的方法,如定期监控维护、备份恢复策略、团队协作与知识管理等。为确保 MySQL 数据库系统高可用性提供全面指导。

推荐镜像

更多