集群理论详解(续一)

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:

扩展知识二:

使用heartbeatV2的CRM组件进行高可用集群的“集群资源管理crm”

1、更改原来haresources资源管理配置文件的方法可用通过/usr/lib64/heartbeat/resources2cib.py进行转换配置文件格式转换。

[root@node1.dtedu.com~]$/usr/lib64/heartbeat/haresources2cib.py 

[root@node1.dtedu.com~]$ls /var/lib/heartbeat/crm/操作后会在此处生成cib.xml文件。

cib.xml


2、启动heartbeat V2版的集群资源管理器crm,需要修改/etc/ha.d/ha.cf配置文件,末尾添加

#crm

crm on


3、监听端口5560、694

[root@node2.dtedu.com /var/www/html]# netstat -tunlp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address               Foreign Address             State       PID/Program name   

tcp        0      0 0.0.0.0:22                  0.0.0.0:*                   LISTEN      1344/sshd           

tcp        0      0 0.0.0.0:5560                0.0.0.0:*                   LISTEN      1066/mgmtd          

tcp        0      0 :::22                       :::*                        LISTEN      1344/sshd           

udp        0      0 0.0.0.0:59913               0.0.0.0:*                               1054/heartbeat: wri 

udp        0      0 224.5.6.7:694               0.0.0.0:*                               1054/heartbeat: wri 

4、crm的图形化配置工具需要账户和密码,为hacluster创建密码。(认证方式为本地认证,所以在哪里认证就在哪里启动配置工具,所以这里是的node2上进行配置,当然也可以在各个节点上都创建账户密码)

[root@node2.dtedu.com /var/www/html]# tail /etc/passwd

vcsa:x:69:69:virtual console memory owner:/dev:/sbin/nologin

saslauth:x:499:76:Saslauthd user:/var/empty/saslauth:/sbin/nologin

postfix:x:89:89::/var/spool/postfix:/sbin/nologin

sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin

apache:x:48:48:Apache:/var/www:/sbin/nologin

hacluster:x:498:498:heartbeat user:/var/lib/heartbeat/cores/hacluster:/sbin/nologin

[root@node2.dtedu.com /var/www/html]# passwd hacluster

更改用户 hacluster 的密码 。

新的 密码:

无效的密码: 它没有包含足够的不同字符

无效的密码: 过于简单

重新输入新的 密码:

passwd: 所有的身份验证令牌已经成功更新。

[root@node2.dtedu.com /var/www/html]# 


5、运行图像化工具hb_gui,此为通过haresources2cib.py脚本转换后的结果

831541.tmp

6、创建以下资源:

6.1、vip,用于高可用的虚拟ip地址

6.2、nfs挂载点,节点挂载的nfs共享文件系统,用于存放HTML页面文件。

6.3、httpd服务,用于启动web服务。

要求:所以资源默认运行在节点1上node1,并且资源间的启动顺序为vip->nfs->httpd。

命令行方式检查高可用集群的状况

Refresh in 5s...


============

Last updated: Thu Mar 30 01:54:33 2017

Current DC: node3.dtedu.com (604f380c-3952-4c80-afdf-56d84aa94f7f)

3 Nodes configured.

3 Resources configured.

============


Node: node2.dtedu.com (f57e6cb6-4edf-4422-adb1-8a5dd467eb9a): online

Node: node3.dtedu.com (604f380c-3952-4c80-afdf-56d84aa94f7f): online

Node: node1.dtedu.com (92dbc6f9-e5ca-4de1-b8b8-d23ed2b9ac0a): online


ha-vip  (ocf::heartbeat:IPaddr):        Started node2.dtedu.com

ha-nfs  (ocf::heartbeat:Filesystem):    Started node1.dtedu.com

ha-httpd        (lsb:httpd):    Started node3.dtedu.com


Failed actions:

    ha-nfs_start_0 (node=node3.dtedu.com, call=5, rc=1): complete


具体步骤:

1、创建组id(vip-nfs-httpd)、资源id(ha-vip,ha-nfs,ha-httpd),并添加资源

484657.tmp

屏幕快照 2017-03-29 下午3.59.58.png

屏幕快照 2017-03-29 下午4.02.31.png

通过修改orders改变资源启动顺序,通过修改colocations将资源放在一个节点上启动。

屏幕快照 2017-03-30 下午3.11.39.png


扩展知识三

heartbeatV2CRM上搭建高可用的mysql

环境介绍:

1、mysql数据库存储在远程挂载的nfs文件系统上,nfs权限使用no_root_squash。

2、各个节点间使用的mysql账户及密码相同,ID号相同。

3、

具体步骤:

1、创建nfs环境

[root@mail ~]# mkdir /mysqldata

[root@mail ~]# vi /etc/exports

/web/htdocs *(ro)

/mysqldata      *(rw,no_root_squash)

[root@mail ~]# exportfs -avr使配置文件生效,免重启。

exporting *:/mysqldata

exporting *:/web/htdocs

                                           

比较现实不同服务器的时间

[root@node1.dtedu.com~]$date;ssh node2 "date"

2017年 03月 30日 星期四 04:20:18 EDT

2017年 03月 30日 星期四 03:54:33 EDT


2、节点创建mysql账户及相同ID,为目录授予mysql权限。

[root@node1.dtedu.com~]$mount -t nfs 10.40.0.37:/mysqldata /mysqldata

[root@node1.dtedu.com~]$useradd -r -u 301 mysql

[root@node1.dtedu.com~]$chown mysql:mysql /mysqldata


3、搭建mariadb数据库。

3.1安装gcc、gcc-c++

3.2安装ncurses-devel

3.3删除CMakeCache.txt

具体步骤:

[root@node2.dtedu.com ~]# tar zxf mariadb-10.1.22.tar.gz 

[root@node2.dtedu.com ~]# cd mariadb-10.1.22

[root@node2.dtedu.com ~/mariadb-10.1.22]# yum install cmake安装cmake

[root@node2.dtedu.com ~/mariadb-10.1.22]# yum install gcc gcc-c++ ncurses-devel


[root@node2.dtedu.com ~/mariadb-10.1.22]# rm CMakeCache.txt  -f

[root@node2.dtedu.com ~/mariadb-10.1.22]# cmake . -DRPM=centos6.7 -DCMAKE_INSTALL_PREFIX=/usr/local/mariadb -DMYSQL_DATADIR=/mysqldata/data -DSYSCONFDIR=/etc

[root@node3.dtedu.com /usr/local/mariadb]# scp ./share/mysql/mysql.server  /etc/init.d/mariadb

[root@node3.dtedu.com /usr/local/mariadb]# chkconfig --add mariadb

[root@node3.dtedu.com /usr/local/mariadb]# chkconfig --list mariadb

mariadb        0:关闭1:关闭2:关闭3:关闭  4:关闭5:关闭6:关闭

[root@node3.dtedu.com /usr/local/mariadb]# service mariadb start

Starting MySQL.170330 07:07:17 mysqld_safe Logging to '/mysqldata/data/node3.dtedu.com.err'.

170330 07:07:17 mysqld_safe Starting mysqld daemon with databases from /mysqldata/data

...................................... SUCCESS! 


[root@node3.dtedu.com /usr/local/mariadb]# cp share/mysql/my-large.cnf /etc/my.cnf

cp:是否覆盖"/etc/my.cnf"? y


配置MariaDB

初始化数据库:

1
2
3
4
5
[root@example.com mariadb-10.0.21] # cd /usr/local/mysql/
[root@example.com mysql] # scripts/mysql_install_db --user=mysql --datadir=/data/mydata/
[root@example.com mysql] # ls /data/mydata/
aria_log.00000001  ibdata1      ib_logfile1  mysql              
testaria_log_control   ib_logfile0  lost+found   performance_schema

 

设置配置文件:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
[root@example.com mysql] # vim /etc/my.cnf
[mysqld]
port            = 3306
socket          =  /tmp/mysql .sock
skip-external-locking
key_buffer_size = 256M
max_allowed_packet = 1M
table_open_cache = 256
sort_buffer_size = 1M
read_buffer_size = 1M
read_rnd_buffer_size = 4M
myisam_sort_buffer_size = 64M
thread_cache_size = 8
query_cache_size= 16M
# Try number of CPU's*2 for thread_concurrency
thread_concurrency = 4
datadir= /data/mydata    // 需要添加此项

 

设置启动脚本:

1
2
3
4
[root@example.com mysql] # cp support-files/mysql.server /etc/init.d/mysqld
[root@example.com mysql] # chkconfig --add mysqld
[root@example.com mysql] # chkconfig --list mysqld
mysqld         0:关闭1:关闭2:启用3:启用4:启用5:启用6:关闭

 

启动服务:

1
2
3
4
[root@example.com mysql] # service mysqld start
Starting MySQL. SUCCESS! 
[root@example.com mysql] # ss -tunl |grep 3306
tcp    LISTEN     0      128                   :::3306                 :::*

 

导出环境变量:

1
2
3
[root@example.com mysql] # vim /etc/profile.d/mysql.sh
export  PATH= /usr/local/mysql/bin :$PATH
[root@example.com mysql] # source /etc/profile.d/mysql.sh

 

导出头文件:

1
2
[root@example.com mysql] # ln -sv /usr/local/mysql/include/ /usr/local/include/mysql
"/usr/local/include/mysql"  ->  "/usr/local/mysql/include/"

 

导出库文件:

1
2
3
4
5
6
7
8
[root@example.com mysql] # vim /etc/ld.so.conf.d/mysql.conf
/usr/local/mysql/lib
[root@example.com mysql] # ldconfig -v
[root@example.com mysql] # ldconfig -p |grep mysql
libmysqlclient_r.so.16 (libc6,x86-64) =>  /usr/lib64/mysql/libmysqlclient_r .so.16
libmysqlclient.so.18 (libc6,x86-64) =>  /usr/local/mysql/lib/libmysqlclient .so.18
libmysqlclient.so.16 (libc6,x86-64) =>  /usr/lib64/mysql/libmysqlclient .so.16
libmysqlclient.so (libc6,x86-64) =>  /usr/local/mysql/lib/libmysqlclient .so


这里安装的mariadb数据库,但在做crm高可用的时候,需要在复制脚本时将mysql.server复制为mysqld,并且在crm添加资源的时候选择mysqld(LSB)模式。



本文转自 blackstome 51CTO博客,原文链接:http://blog.51cto.com/137783/1968785,如需转载请自行联系原作者

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2天前
|
存储 Prometheus 监控
构建高可用性ClickHouse集群:从理论到实践
【10月更文挑战第27天】在数据驱动的时代,构建一个稳定、高效的数据库系统对于企业的业务发展至关重要。作为一名数据工程师,我深知数据库系统的高可用性和可扩展性对于支撑企业应用的重要性。在这篇文章中,我将分享如何构建一个高可用性的ClickHouse集群,从分布式表的设计到数据复制与分片,再到故障恢复机制,确保系统在大规模数据处理中的稳定性和可靠性。
12 0
|
2月前
|
存储 负载均衡
高可用集群相关术语扫盲篇
关于高可用集群相关术语的扫盲篇,涵盖了集群类型、系统可用性、系统故障、提升系统高可用性的解决方案、高可用服务的组件、共享存储、网络分区、双节点集群、HA Cluster实现方案和高可用集群后端存储等多个方面的内容。
41 1
高可用集群相关术语扫盲篇
|
存储 负载均衡 算法
作者推荐 | 【分布式技术专题】「架构设计方案」图解学习法总结集群模式下的各种软负载均衡策略实现及原理分析
作者推荐 | 【分布式技术专题】「架构设计方案」图解学习法总结集群模式下的各种软负载均衡策略实现及原理分析
179 0
作者推荐 | 【分布式技术专题】「架构设计方案」图解学习法总结集群模式下的各种软负载均衡策略实现及原理分析
|
负载均衡 算法 前端开发
分布式系统常见理论讲解
分布式系统是指由多个节点通过网络进行通信和协作的系统,它具有高可用性、高扩展性、高性能等优点,但也面临着一些挑战,如数据一致性、容错性、负载均衡等。为了解决这些问题,分布式系统设计出现了一些经典的理论和方法,如 CAP 理论、BASE 理论、一致性等。
115 0
|
存储 负载均衡 网络协议
分布式理论
1.定义 分布式的本质是一系列计算机集群通过网络共同完成一串连贯的任务。 2.关键技术 分布式主要关注的几个关键点技术是: 性能 容错 通信
55 0
|
负载均衡
分布式理论学习-分布式高可用
当系统出现大量用户请求时,我们主要从负载均衡、流量控制、故障隔离三个角度去思考如何提高系统高可用,以避免处理能力的上线,导致系统崩溃。
|
存储 缓存 索引
分布式理论学习-分布式存储
在学习分布式存储之前,那我们需要对CAP理论、原则、数据分布方法有一定的认识。
|
消息中间件
分布式理论学习-分布式通信
分布式通信主要内容 远程调用:一个服务调用另外一个服务 发布订阅:生产者发布消息到消息中心,消费者从消息中心获取消息 消息队列:消息队列的思想就是基于队列实现的,按照FIFO顺序消费信息
分布式理论学习-分布式体系结构
通过学习《分布式技术原理与算法解析》课程,对分布式理论有一个整体的认识,利用思维导图将内容整理出来。
|
存储 负载均衡 算法
【集群】集群的概念(相关知识)、常用工具/算法、常见集群
文章目录 前言 一、集群架构 1.1 负载调度器 1.1.1 常用调度算法
191 0
【集群】集群的概念(相关知识)、常用工具/算法、常见集群