SaltStack实例：构建高可用架构

      本章主要介绍通过saltstack构建系统高可用架构，以满足业务需求。通过Haproxy实现负载均衡调度后端Nginx+PHP服务器，Keepalived实现系统高可用功能，Memcached存储session会话，后端数据库采用Mysql并且实现主从复制以及读写分离。

一、拓扑图

一、系统架构图

二、saltstack分层管理图

我们通过saltstack实现的整个系统环境可以分为三部分：

系统初始化：用于设定节点状态，如dns、history命令记录、系统内核参数设定等。

功能模块：用于整个系统的功能实现，如Nginx、Mysql、Haproxy、keepalived的安装和脚本文件配置下发等。

业务模块：用于引用一些差异型功能，如hapzory或keeplaived的配置文件下发，每个节点的配置参数是不一样的，我们称之为业务模块。

之所以将功能模块和业务模块分开来做这样的好处在于：

如haproxy的安装以及负载均衡配置的实现之所以分开来做，这样的好处在于随着节点数量不断的增加，差异性不断的扩大。我们安装都引用相同的安装脚本，但是每个节点的参数配置是不相同的，因此我们在业务模块上进行每个节点不同参数的实现。

实验环境：

Saltstack的安装、配置、授权等可参考：http://blog.51cto.com/bovin/1984115

二、Salt-Minion端环境配置

一、系统初始化

    我们将系统的每个节点都进行一定的系统初始化设定，如dns、history命令记录、系统内核参数设定等。首先，进入salt的base环境，我们所有的系统设定都在此环境下进行设定。

创建init目录，用于系统的整个初始化相关设定。

配置各个节点dns解析：

files下resolv.conf文件内容为：

使各个节点history命令都记录时间：

注：file模块通过append追加方式写入环境变量中

审计sls文件，将每个用户的命令都记录到/var/log/message文件中：

对节点的系统内核参数设定：

引导以上各个功能模块：

注：通过include进行模块引用      

编写top file文件：

注：base环境下，init目录查找env_init文件

目录文件结构，如下：

在执行时我们可以通过指定参数，模拟执行：

注：test=True模拟执行方式

模拟执行完没有报错，我们可以放心去设定节点初始化环境了：

三、前端高可用

根据整个系统架构图，我们可以分为两大部分来完成。前端高可用和后端上线服务，前端高可用主要包括haproxy和keepalived安装及配置。后端线上服务包括nginx、php、memcache、mysql的安装及配置。以下是haproxy和keepalived安装和配置。

一、功能模块之haproxy安装

    功能模块分为：前端调度Haproxy，后端Nginx+PHP，数据库Mysql以及会话存储Memcached。以下是saltstack实现功能模块Haproxy的实例安装：

创建Haproxy模块的文件目录：

注：pkg目录用于存放软件安装包

注：haproxy目录用于存放haroxy的安装脚本和文件

注：pkg-init.sls用解决源码安装所需要的相关依赖

注：salt文件相关参数介绍：

目录结构，如下：

执行安装haproxy：

注：env=prod 指定prod目录下执行，如果不加此参数会默认从base环境下执行sls文件

可以看到执行haproxy安装成功了。

二、业务引用之Haproxy负载均衡的实现

    Haproxy的安装我们选择源码包进行安装，我们通过文件管理模块进行haproxy的文件配置管理，需要将两个节点配置为负载均衡模式。

创建业务引用相关目录：

    业务引用我们都是在cluster目录下进行。

编写haproxy的salt文件：

    salt文件主要涉及到haproxy的安装引用、对配置文件的下发、haproxy的服务启动等功能。

注：此文件依赖于haproxy目录下的install.sls文件。

现在，可以编写top file文件，让其两个haproxy节点能够正常运行服务：

编写完top file文件可以，执行高级模式来执行salt文件：

可以看到已经执行成功，成功21项状态。

现在，我们可以通过浏览器访问haproxy管理界面：

在这里由于/var/www/html没有页面信息，健康检查会显示异常，所以需要在两个节点上创建html文件信息。

三、功能模块之keepalived的安装

    在keepalived安装之前，我们首先需要准备keepalived的安装包、启动脚本以及配置文件等。我们需要将所有的这些东西都放到keepalived/files目录下。

创建keepalived的相关目录：

拷贝keepalived的相关文件：

keepalived.init-keepalived的启动脚本

keepalived.conf-keepalived的配置文件:

现在，我们查看files目录都有哪些东西：

准备好keepalived的相关文件之后，现在我们可以编写salt文件:

    salt文件主要涉及到pkg-init脚本的引用，此脚本主要是解决安装前的依赖；keepalived-install标签用于安装keepalived；keepalived-init标签用于下发启动脚本以及将服务加入到系统启动中；/etc/sysconfg/keepalived标签用于下发配置文件到各个节点上。

目录文件结果为：

现在，我们开始执行salt文件：

四、业务引用之keepalived

    同haproxy业务引用一样，我们同样在cluster目录下进行。

进入cluster目录：

编写salt文件：

    salt文件涉及到keepalived的安装的引用；每个节点的具体参数如何这里主要通过编写jiaja模版来实现每个节点参数的差异性。通过grains的fqdn来判断不同的主机名，实现不同主机不同参数。

keepalived差异性配置文件：

    在keepalived安装脚本中，我们为了能够启动keepalived服务，我们在两个节点上都下发相同的keepalived配置文件，这次为了实现每个节点上的keepalived去配置不同的参数，需要下发一份差异性配置文件。

编写top文件：

将业务引用模块keepalived的haprox-outside-keepalived导入。

通过salt高级模式执行：

四、后端线上服务

完成前端高可用之后，我们就可以去完成线上服务了。线上服务包括nginx、php、memache、mysql等的安装及配置。

一、功能模块之nginx安装
创建nginx安装目录：

将nginx安装包和脚本拷贝到files目录下

解决安装nginx依赖关系：

编写nginx安装sls文件：

目录结果为：

执行安装：

二、业务模块之nginx配置管理

创建app目录用户nginx及php配置文件管理：

将需要的文件拷贝到files/nginx目录下：

i

编写sls文件进行配置文件管理下发:

注：引用jinja模版，将fastcgi_params、mime.types、nginx.conf三个相关文件下发到节点的同一目录下。

执行文件：

创建php安装目录：

将安装包拷贝到files目录下：

解决php安装的依赖关系：

编写sls文件：

执行安装：

四、业务模块之php配置管理

app目录结构：

php文件下发脚本内容为：

执行配置下发：

现在，将nginx.sls和php,sls写入top file文件：

编写top文件：

五、Memcach安装

memcach通过yum来进行安装，创建memcache目录：

编写sls文件：

执行安装：

注：192.168.39.203作为memcache服务器

编写top file文件，将memcache安装脚本导入：

高级模式下执行sls：

未完待续,,,