mysql-cluster 安装配置

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群版 2核4GB 100GB
推荐场景:
搭建个人博客
云数据库 RDS MySQL,高可用版 2核4GB 50GB
简介:

mysql-cluster免编译包下载:https://dev.mysql.com/downloads/file/?id=469881

新版本支持只把索引和用到的数据加载到内存,而不是老版本的整个数据库都得加到内存中


wget https://cdn.mysql.com//Downloads/MySQL-Cluster-7.5/mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz


解压:

# tar xvf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz

# mv xvf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64 /soft/mysql


给mysql-cluster目录授权

#useradd -s mysql /sbin/nologin

# mkdir /soft/mysql/data

# chown -R mysql:mysql /soft/mysql/*

# chmod +x /soft/mysql/bin/ndb_mem*

# cd /soft/mysql/

# ln -s /soft/mysql/bin/ndb_mgmd   /sbin/ndb_mgmd     #方便在shell直接调用ndb_mgmd命令

# ln -s /soft/mysql/bin/ndb_mgm   /sbin/ndb_mgm      #方便在shell直接调用ndb_mgm命令      

建立config.ini文件

# vim config.ini                     #内容如下,一定要注意格式。从windows复制过来的话记得用uft8编码


[NDBD DEFAULT]


NoOfReplicas=2                      #每个数据节点的镜像数量


DataMemory=500M                 #每个数据节点中给数据分配的内存


IndexMemory=300M                 #每个数据节点中给索引分配的内存


[NDB_MGMD]                     #配置管理节点,[]后面不能有空格,也不能有注释


hostname=192.168.240.130

datadir=/soft/mysql/data           #管理节点数据(日志)目录


[NDBD]                       #数据节点配置,[]后面不能有空格,也不能有注释


hostname=192.168.240.129

datadir=/soft/mysql/data 


[NDBD]


hostname=192.168.240.127

datadir=/soft/mysql/data


[MYSQLD]                     #SQL节点目录,[]后面不能有空格,也不能有注释


hostname=192.168.240.129


[MYSQLD]


hostname=192.168.240.128

-------------------------------------------------------------------------------------------------------------------

[root@amoebe mysql]# ./bin/ndb_mgmd -f config.ini      #启动服务

MySQL Cluster Management Server mysql-5.7.18 ndb-7.5.6   #启动成功


[root@amoebe mysql]# ./bin/ndb_mgm                #进入管理程序,可以看到配置文件生效了,但因为没配置节点上的mysql,所以这里显示未连接

-- NDB Cluster -- Management Client --

ndb_mgm> show

Connected to Management Server at: localhost:1186

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2 (not connected, accepting connect from 192.168.240.129)

id=3 (not connected, accepting connect from 192.168.240.127)


[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.240.130  (mysql-5.7.18 ndb-7.5.6)


[mysqld(API)]2 node(s)

id=4 (not connected, accepting connect from 192.168.240.129)

id=5 (not connected, accepting connect from 192.168.240.128)


-------------------------------------------------------------------------------------------------------------------------------

配置节点: 192.168.240.128/192.168.240.129


[root@localhost]# useradd -s /sbin/nologin mysql

[root@localhost]# mkdir /soft/mysql

[root@localhost]# tar xf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz 

[root@localhost]# mkdir /soft/mysql/data

[root@localhost]# chown -R mysql:mysql /soft/mysql

[root@localhost]# cd /soft/mysql

[root@localhost mysql]# yum install -y libaio*

vim support-files/mysql.server    #修改服务文件

basedir=/soft/mysql

datadir=/soft/mysql/data


[root@yaho mysql]# bin/mysqld  --initialize --user=mysql --basedir=/soft/mysql --datadir=/soft/mysql/data

./bin/mysqld --initialize --user=mysql --datadir=/soft/mysql/data      --注意自动生成的临时密码


[Note] A temporary password is generated for root@localhost: pByj>rz95OhV

----------------------------------------------------------------------------------------------------------------------------------

先更改密码:


[root@yaho mysql]# bin/mysql -u root -p'pByj>rz95OhV'        --登录mysql,有特殊符号,要用''括起来,在这里踏坑了

mysql> use mysql;                                --必须先更改密码才可以操作

ERROR 1820 (HY000): You must reset your password using ALTER USER statement before executing this statement.

mysql> alter user 'root'@'localhost' identified by '123456';

Query OK, 0 rows affected (0.00 sec)


[root@mysql]# vim /etc/my.cnf

[mysqld]

datadir=/soft/mysql/data

user=mysql

ndbcluster

lc_messages-dir=/soft/mysql/share/

ndb-connectstring=192.168.240.130

 

[mysql_cluster]

ndb-connectstring=192.168.240.130

 

[root@mysql]# bin/ndbd --initial      #第一次使用要初始化数据,下次不能加--initial,否则会清空数据库

[root@mysql]# ln -s /soft/mysql/bin /sbin/mysql

[root@mysql]# ln -s /soft/mysql/support-files/mysql.server  /sbin/mysqld


----------------------------------------------------------------------------------------------------------------------------

回到130控制台:


ndb_mgm> show

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2@192.168.61.128  (mysql-5.7.18 ndb-7.5.6, starting, Nodegroup: 0)  --节点ndbd已连接

id=3@192.168.61.129  (mysql-5.7.18 ndb-7.5.6, starting, Nodegroup: 0) --节点ndbd已连接


[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.61.130  (mysql-5.7.18 ndb-7.5.6)


[mysqld(API)]2 node(s)

[mysqld(API)]2 node(s)

id=4@192.168.61.128  (mysql-5.7.18 ndb-7.5.6)                  #小心防火墙

id=5@192.168.61.129  (mysql-5.7.18 ndb-7.5.6)                  #小心防火墙


-----------------------------------------------------------------------------------------------------------------------------

测试:

建库/建表

在192.168.61.128上登录mysql:

mysql>create databases abc charset=gbk;

Query OK, 0 rows affected (0.72 sec)

mysql>create table name(id int(5) not null primary key auto_increment,name varchar(10) not null ) engine=ndb;

Query OK, 0 rows affected (0.72 sec)

mysql>insert into name(name) values ('张三'),('李四');


-----------------------------------------------------------------------------------------------------------------------------

在192.168.240.128/192.168.240.129 进行查询

mysql>select * from tp.name;

+----+---------+

| id | name   |

+----+----------+

|  1 | 张三   |

|  2 | 李四   |

+----+---------+


-----------------------------------------------------------------------------------------------------------------------------

模拟192.168.240.128/192.168.240.129故障之一失效,再查询

mysql>select * from tp.name;


+----+---------+

| id | name   |

+----+----------+

|  1 | 张三   |

|  2 | 李四   |

+----+---------+

mysql>insert into name(name) values ('长江'),('黄河');

Query OK, 0 rows affected (0.72 sec)

mysql> select * from tp.name group by id;

+----+--------+

| id | name   |

+----+--------+

|  1 | 长江   |

|  2 | 黄河   |

|  3 | 张三   |

|  4 | 李四   |

+----+--------+

4 rows in set (0.01 sec)


经过测试总结大致有几点:

  1. 当cluster挂了后,两个数据节点的mysql都不能访问数据库;

  2. 当cluster挂了时,两个mysql还是可以正常工作的,更新数据也会同步,但不能重启mysql服务;

2.只要不是两个mysql服务同时挂了,数据还是安全的。

3.当cluster挂掉,节点A挂掉,这时往节点B上更新数据;cluster和节点A恢复上线后会造成节点A和节点B的数据不一致。

4.当两个mysql数据不一致时,先启动cluster,再启动数据更新的数据节点和SQL节点,确保已经成功连上cluster,最后再启动另一个节点,后一个节点会自动更新最新的数据。!!启动顺序很重要!!!

5.只要cluster和ndbd还存活,mysql暂时的失效,数据也不会丢失。

7.必须有一个ndbd存活,mysql才能正常工作。


-----------------------------------------------------------------------------------------------------------------------------


启动顺序:

管理节点 ndb_megd -> 数据节点 ndbd -> SQL节点 指定ndbcluster 参数的专用mysqld

     ndb_mgmd -f config.ini -> ndbd -> mysqld start 


关闭顺序:

SQL节点 指定ndbcluster 参数的专用mysqld ->  管理节点 ndb_mem

      mysqld stop --> ndb_mgm -e shutdown --> 完成



附配置过程中碰到的几个错误:


1. mysqld --initialize-insecure自动生成无密码的root用户,mysqld --initialize自动生成带随机密码的root用户


2.用mysql帐号设置的话需要在 /etc/security/limits.conf 中追加下面信息,不然会提示limite限制错误:

mysql   hard   nofile   65535


3.[ERROR] Can't find error-message file '/usr/local/mysql/share/zh-cn/errmsg.sys'. Check error-message file location and 'lc-messages-dir' configuration directive.

在my.cnf里添加行:

lc_messages-dir=/soft/mysql/share/


4.启动mysql时,可能会提示:ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/tmp/mysql.sock' (111)


ln -s /soft/mysql/mysql.sock  /tmp/mysql.sock             #要用绝对路径


5.ndb_mgm> showNode 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2353: 'Insuffice. ndbd服务自动断开,可能是时差的问题:

 cluser端 kill掉 ndb_mgmd 再重新启动。数据节点再重新启动ndbd 和mysqld 即可。


NDB引擎和Innodb 引擎的区别:摘自http://www.oschina.net/question/565065_79802

N NDB 和 Innodb 的使用基本是一样的,ACID (原子性、一致性、隔离性、持久性)实现方式也基本相同,但是他们之间有一个很重要的区别:在同一个 transaction 中,如果某一部的执行出错,Innodb 会继续的往下执行,而 NDB 则会马上回滚到最初状态(类似于 SqlServer 中的 SET XACT_ABORT ON 的状态),如果不注意这一点的话,在一些极端情况下,系统将出现数据不一致的情况,所以还是需要大家多多注意哦!

测试用例如下(在 test 库中进行测试):

 

[Innodb 用例]

mysql> create table test_innodb (i int not null primary key) engine innodb;

mysql> begin;

mysql> insert into test_innodb values(1);

mysql> insert into test_innodb values(1); # 主键重复出错

mysql> commit;

mysql> select * from test_innodb;

+---+
| i |
+---+
| 1 |
+---+
1 row in set (0.00 sec)

 

[NDB 用例]

mysql> create table test_ndb (i int not null primary key) engine ndbcluster;

mysql> begin;

mysql> insert into test_ndb values(1);

mysql> insert into test_ndb values(1); # 主键重复出错

mysql> commit;

mysql> select * from test_ndb;

Empty set (0.00 sec)






      本文转自笔下生辉  51CTO博客,原文链接:http://blog.51cto.com/752030200/1931917,如需转载请自行联系原作者




相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
11天前
|
SQL 关系型数据库 MySQL
MySQL Workbench的安装与配置
MySQL Workbench的安装与配置
|
24天前
|
Prometheus 监控 关系型数据库
数据库同步革命:MySQL GTID模式下主从配置的全面解析
数据库同步革命:MySQL GTID模式下主从配置的全面解析
91 0
|
20小时前
|
安全 关系型数据库 MySQL
CentOS 8 中安装与配置 MySQL
CentOS 8 中安装与配置 MySQL
12 3
|
2天前
|
关系型数据库 MySQL 数据库
Django与MySQL:配置数据库的详细步骤
Django与MySQL:配置数据库的详细步骤
|
24天前
|
SQL 关系型数据库 MySQL
1.Mysql 安装配置和使用
1.Mysql 安装配置和使用
23 1
1.Mysql 安装配置和使用
|
10天前
|
关系型数据库 MySQL 数据库
MySQL8.0.36 安装配置教程(保姆级,包含图文讲解,环境变量的配置)适合小白
MySQL8.0.36 安装配置教程(保姆级,包含图文讲解,环境变量的配置)适合小白
|
13天前
|
SQL 监控 关系型数据库
实时计算 Flink版产品使用问题之使用mysql cdc配置StartupOptions.initial()全量之后就不增量了,是什么原因
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
19天前
|
存储 DataWorks 关系型数据库
DataWorks产品使用合集之在使用数据集成中的同步任务从mysql同步表到oss,存储为csv时,最终生成的文件中没有表头,这个属性可以在哪里配置么
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
16天前
|
关系型数据库 MySQL 数据库
Mysql—8.0.21下载安装配置教程
该教程介绍了MySQL的下载与安装步骤。建议从官网下载MySQL 8.0及以上版本,也可通过提供的百度网盘链接获取。解压后,在指定目录创建my.ini配置文件,并替换basedir和datadir为自己实际的安装路径。接着,将MySQL安装目录的bin文件夹添加到系统环境变量Path中。以管理员模式运行CMD,进入bin目录,使用`mysqld --initialize --console`初始化数据库,记下生成的临时密码。最后,用`net start mysql`启动服务,`mysql -u root -p`登录并使用ALTER指令修改初始密码。
90 1
|
18天前
|
分布式计算 DataWorks 关系型数据库
DataWorks操作报错合集之数据源同步时,使用脚本模式采集mysql数据到odps中,使用querySql方式采集数据,在脚本中删除了Reader中的column,但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。

推荐镜像

更多