分布式系列教程(18) -分布式配置中心Apollo安装与详解

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
云数据库 RDS MySQL Serverless,价值2615元额度,1个月
简介: 分布式系列教程(18) -分布式配置中心Apollo安装与详解

代码已提交至Github,有兴趣的同学可以下载来看看:https://github.com/ylw-github/SpringBoot-Apollo-Demo

本文目录结构:

l____引言

l____ 1. Apollo简介

l________1.1 Apollo特点

l________1.2 Apollo整体架构原理

l____2. Apollo配置中心搭建

l________2.1 版本要求

l________2.2 Apollo数据库设计

l________2.3 Apollo服务搭建

l____3. SpringBoot客户端代码测试

l____总结

引言

项目中配置文件比较繁杂,而且不同环境的不同配置修改相对频繁,每次发布都需要对应修改配置,如果配置出现错误,需要重新打包发布,时间成本较高,因此需要做统一的分布式配置中心,能做到自动更新配置文件信息,解决以上问题。

常用的分布式配置中心框架:

  • Disconf(依赖于zookpeer)
  • Zookpeer(保证配置文件信息实时更新 -事件通知)
  • diamond(阿里巴巴研发)
  • Apollo阿波罗(携程研发)
  • Redis
  • xxl-conf

大型互联网公司自己内部都有自己独立分布式配置中心、独立RPC、独立分布式各种解决方案。

学习分布式配置中心之前,需要明确以下两个中心,区分好:

  • 注册中心:主要解决rpc服务治理
  • 分布式配置中心:主要解决分布式配置文件管理

本文主要以Apollo分布式配置中心为主题来讲解。

1. Apollo简介

Apollo(阿波罗)是携程框架部门研发的分布式配置中心,能够集中化管理应用不同环境、不同集群的配置,配置修改后能够实时推送到应用端,并且具备规范的权限、流程治理等特性,适用于微服务配置管理场景。

1.1 Apollo特点

  • 统一管理不同环境、不同集群的配置: 所有的配置发布都有版本概念,从而可以方便的支持配置的回滚。
  • 配置修改实时生效(热发布): 用户在Apollo修改完配置并发布后,客户端能实时(1秒)接收到最新的配置,并通知到应用程序
  • 灰度发布:支持配置的灰度发布,比如点了发布后,只对部分应用实例生效,等观察一段时间没问题后再推给所有应用实例。
  • 权限管理、发布审核、操作审计: 应用和配置的管理都有完善的权限管理机制,对配置的管理还分为了编辑和发布两个环节,从而减少人为的错误。所有的操作都有审计日志,可以方便的追踪问题。
  • Apollo还提供了Java和.Net的原生客户端,方便应用集成支持Spring Placeholder, Annotation和Spring Boot的ConfigurationProperties,方便应用使用(需要Spring 3.1.1+)同时提供了Http接口,非Java和.Net应用也可以方便的使用。
  • 提供开放平台API:Apollo自身提供了比较完善的统一配置管理界面,支持多环境、多数据中心配置管理、权限、流程治理等特性。不过Apollo出于通用性考虑,对配置的修改不会做过多限制,只要符合基本的格式就能够保存。对于有些使用方,它们的配置可能会有比较复杂的格式,如xml, json,需要对格式做校验。还有一些使用方如DAL,不仅有特定的格式,而且对输入的值也需要进行校验后方可保存,如检查数据库、用户名和密码是否匹配。对于这类应用,Apollo支持应用方通过开放接口在Apollo进行配置的修改和发布,并且具备完善的授权和权限控制。
  • 部署简单 :配置中心作为基础服务,可用性要求非常高,这就要求Apollo对外部依赖尽可能地少,目前唯一的外部依赖是MySQL,所以部署非常简单,只要安装好Java和MySQL就可以让Apollo跑起来,Apollo还提供了打包脚本,一键就可以生成所有需要的安装包,并且支持自定义运行时参数。

1.2 Apollo整体架构原理

2. Apollo配置中心搭建

Apollo配置中心的搭建分为两步:Apollo数据库设计和Apollo服务的搭建。

2.1 版本要求

Java:

  • Apollo服务端:1.8+
  • Apollo客户端:1.7+

MySQL:

  • 版本要求:5.6.5+

虚拟机内存:

  • 必须是2G以上,不然启动不了项目

Apollo的表结构对timestamp使用了多个default声明,所以需要5.6.5以上版本。

2.2 Apollo数据库设计

Apollo服务端共需要两个数据库:ApolloPortalDB和ApolloConfigDB,我们把数据库、表的创建和样例数据都分别准备了sql文件,只需要导入数据库即可。

在本地MySQL数据库执行apolloportaldb.sql和apolloconfigdb.sql文件:

apolloconfigdb apolloportaldb

调整ApolloPortalDB.ServerConfig表:

字段解析,可以根据实际情况设置:

  1. apollo.portal.envs - 可支持的环境列表:默认值是dev,如果portal需要管理多个环境的话,以逗号分隔即可(大小写不敏感),例如:DEV,FAT,UAT,PRO。
  2. organizations - 部门列表:Portal中新建的App都需要选择部门,所以需要在这里配置可选的部门信息。
  3. superAdmin - Portal超级管理员 默认值apollo(默认用户),多个账号以英文逗号分隔(,)。
  4. consumer.token.salt - consumer token salt 如果会使用开放平台API的话,可以设置一个token salt。如果不使用,可以忽略。
  5. wiki.address portal上“帮助”链接的地址,默认是Apollo github的wiki首页,可自行设置。
  6. admin.createPrivateNamespace.switch 是否允许项目管理员创建private namespace。设置为true允许创建,设置为false则项目管理员在页面上看不到创建private namespace的选项。

3.调整ApolloConfigDB.ServerConfig表

字段解析,可以根据实际情况设置:

  1. eureka.service.url - Eureka服务Url: apollo-configservice和apollo-adminservice都需要向eureka服务注册,需要配置eureka服务地址。默认apollo-configservice本身就是一个eureka服务,所以只需要填入apollo-configservice的地址即可(本文以此讲解)。如果希望将Config
    Service和Admin Service注册到公司统一的Eureka上,需修改Config Service。
  2. namespace.lock.switch - 一次发布只能有一个人修改开关:用于发布审核,这是一个功能开关,如果配置为true的话,那么一次配置发布只能是一个人修改,另一个发布。
  3. config-service.cache.enabled - 是否开启配置缓存:这是一个功能开关,如果配置为true的话,config
    service会缓存加载过的配置信息,从而加快后续配置获取性能。(默认为false,开启前请先评估总配置大小并调整config
    service内存配置。)

2.3 Apollo服务搭建

下载Quick Start安装包:https://github.com/nobodyiam/apollo-build-scripts,安装包有58M,所以下载挺慢的,因为是一个可以自启动的jar包,里面包含了所有依赖jar包以及一个内置的tomcat容器。

1.上传到部署的服务器(我的服务器地址是:192.168.162.131):

2.解压并修改demo.sh文件:

unzip apollo-build-scripts-master.zip 
cd apollo-build-scripts-master
vi demo.sh

3.启动项目:

因为是启动3个项目,所以要耐心等候。

./demo.sh start

等了大概5分钟,3个服务终于全部跑起来了,可以看到占内存1.2G,挺好资源的:

3.登录注册中心(ConfigService)和Apollo门户(Portal)看看:

登录注册中心:http://192.168.162.131:8080/,可以看到adminservice和configservice都注册上了。

登录Apollo门户(http://192.168.162.131:8070/signin),登录账号:apollo,密码:admin

可以看到apollo的主界面是这样的:

3. SpringBoot客户端代码测试

代码已上传到Github,可以下载来参考:https://github.com/ylw-github/SpringBoot-Apollo-Demo

在没有引入Apollo之前,每次修改配置信息都要重启服务器,需要先在配置文件里配置参数,例如(application.yml):

server:
  port: 8090
spring:
  application:
    name: apollo-test
login:
  userName: ylw
  passWord: 123

Controller:

package com.ylw.controller;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
@RestController
public class IndexController {
    @Value("${login.userName}")
    private String userName;
    @Value("${login.passWord}")
    private String passWord;
    @RequestMapping("/getLoginMsg")
    public String setString() {
        return userName + " ---- " + passWord;
    }
}

浏览器请求:http://localhost:8090/getLoginMsg,如果需要修改userName和passWord,那么就需要重启服务器。

这个时候分布式配置中心概念就出来了,百花齐放,本文的Apollo分布式配置中心亦如此。下面看看客户端如何集成Apollo分布式配置中心:

1.首先配置文件不需要写配置内容了,删去:

server:
  port: 8090
spring:
  application:
    name: apollo-test
#login:
#  userName: ylw
#  passWord: 123

2.Java代码当然也需要修改,不然代码编译的时候会报错,设置个默认值default。

package com.ylw.controller;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
@RestController
public class IndexController {
    @Value("${login.userName:default}")
    private String userName;
    @Value("${login.passWord:default}")
    private String passWord;
    @RequestMapping("/getLoginMsg")
    public String setString() {
        return userName + " ---- " + passWord;
    }
}

3.添加依赖

<dependency>
    <groupId>com.ctrip.framework.apollo</groupId>
    <artifactId>apollo-client</artifactId>
    <version>1.5.0</version>
</dependency>
<dependency>
    <groupId>com.ctrip.framework.apollo</groupId>
    <artifactId>apollo-core</artifactId>
    <version>1.5.0</version>
</dependency>

4.启动类添加注解:

@Configuration
@EnableApolloConfig

5.新建app.properties,并配置apollo信息(src/main/resources/META-INF/app.properties):

6.在Apollo平台新建任务

7.添加配置信息:

8.启动客户端项目

9.发布

点击发布:

可以看到已发布:

浏览器输入(http://localhost:8090/getLoginMsg),可以看到配置信息被修改了:

这样就实现了没有重启服务器来修改配置文件。

最后附上Apollo配置中心设计原理官方链接:https://github.com/ctripcorp/apollo/wiki/Apollo%E9%85%8D%E7%BD%AE%E4%B8%AD%E5%BF%83%E8%AE%BE%E8%AE%A1

总结

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
1月前
|
算法 数据处理 异构计算
CatBoost高级教程:分布式训练与大规模数据处理
CatBoost高级教程:分布式训练与大规模数据处理【2月更文挑战第15天】
245 14
|
2月前
|
Java Linux Spring
Zookeeper实现分布式服务配置中心
Zookeeper实现分布式服务配置中心
49 0
|
2月前
|
机器学习/深度学习 分布式计算 Python
OpenAI Gym 高级教程——分布式训练与并行化
OpenAI Gym 高级教程——分布式训练与并行化
200 1
|
2月前
|
消息中间件 RocketMQ Docker
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)
53 0
|
3月前
|
人工智能 弹性计算 PyTorch
【Hello AI】安装和使用AIACC-ACSpeed-分布式训练场景的通信优化库
AIACC-ACSpeed专注于分布式训练场景的通信优化库,通过模块化的解耦优化设计,实现了分布式训练在兼容性、适用性和性能加速等方面的升级。本文为您介绍安装和使用AIACC-ACSpeed v1.1.0的方法。
|
3月前
|
消息中间件 RocketMQ Docker
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)(下)
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)
30 0
|
消息中间件 RocketMQ Docker
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)(上)
分布式事物【RocketMQ事务消息、Docker安装 RocketMQ、实现订单微服务、订单微服务业务层实现】(八)-全面详解(学习总结---从入门到深化)
69 0
|
4月前
|
编译器 定位技术 开发工具
分布式版本控制系统Git的下载、安装与使用其复制GitHub项目代码的方法
分布式版本控制系统Git的下载、安装与使用其复制GitHub项目代码的方法
|
4月前
|
存储 NoSQL 关系型数据库
基于内存的分布式NoSQL数据库Redis(一)介绍与安装
基于内存的分布式NoSQL数据库Redis(一)介绍与安装
173 0
|
4月前
|
监控 前端开发 应用服务中间件
Zabbix【部署 01】Zabbix企业级分布式监控系统部署配置使用实例(在线安装及问题处理)程序安装+数据库初始+前端配置+服务启动+Web登录
Zabbix【部署 01】Zabbix企业级分布式监控系统部署配置使用实例(在线安装及问题处理)程序安装+数据库初始+前端配置+服务启动+Web登录
415 0

热门文章

最新文章