Spring Cloud Gateway 数据库存储路由信息的扩展方案

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介:

动态路由背景

无论你在使用Zuul还是Spring Cloud Gateway 的时候,官方文档提供的方案总是基于配置文件配置的方式

例如:

# zuul 的配置形式
  routes:
    pig-auth:
      path: /auth/**
      serviceId: pig-auth
      stripPrefix: true
  # gateway 的配置形式
  routes:
  - id: pigx-auth
  	uri: lb://pigx-auth
    predicates:
    - Path=/auth/**
    filters:
    - ValidateCodeGatewayFilter

配置更改需要重启服务,不能满足实际生产过程中的动态刷新、实时变更的业务需求。

​ 基于以上分析 pig已经提供了基于Zuul版本的动态路由功能,附Git 地址传送门,效果如下图可以实时配置修改刷新。

Spring Cloud Gateway 路由加载源码

  1. DispatcherHandler 接管用户请求
  2. RoutePredicateHandlerMapping 路由匹配
    1. 根据RouteLocator获取 RouteDefinitionLocator
    2. 返回多个RouteDefinitionLocator.getRouteDefinitions()的路由定义信息
  3. FilteringWebHandler执行路由定义中的filter 最后路由到具体的业务服务中

Spring Cloud Gateway 默认动态路由实现

GatewayControllerEndpoint 基于actuate端点的默认实现,支持JVM 级别的动态路由,不能序列化存储


// 上图动态路由的信息保存的默认实现是基于内存的实现
public class InMemoryRouteDefinitionRepository implements RouteDefinitionRepository {
	private final Map<String, RouteDefinition> routes = synchronizedMap(new LinkedHashMap<String, RouteDefinition>());
	@Override
	public Mono<Void> save(Mono<RouteDefinition> route){}
	@Override
	public Mono<Void> delete(Mono<String> routeId){}

	@Override
	public Flux<RouteDefinition> getRouteDefinitions(){}
}

扩展基于Mysql + Redis存储分布式动态组件

为什么使用Mysql的同时,又要使用Redis?

  1. spring cloud gateway 基于webflux 背压,暂时不支持mysql 数据库
  2. Redis-reactive 支持 spring cloudgateway 的背压,同时还可以实现分布式,高性能

扩展思路

  1. 增加一个路由管理模块,参考GatewayControllerEndpoint实现,启动时加载数据库中配置文件到Redis
  2. 网关模块重写RouteDefinitionRepository,getRouteDefinitions()取Redis中读取即可实现
  3. 前端配合 json-view 类似插件,直接修改展示。

具体实现

  1. 路由管理模块核心处理逻辑,获取路由和更新路由
    /**
     * @author lengleng
     * @date 2018年11月06日10:27:55
     * <p>
     * 动态路由处理类
     */
    @Slf4j
    @AllArgsConstructor
    @Service("sysRouteConfService")
    public class SysRouteConfServiceImpl extends ServiceImpl<SysRouteConfMapper, SysRouteConf> implements SysRouteConfService {
    	private final RedisTemplate redisTemplate;
    	private final ApplicationEventPublisher applicationEventPublisher;
    
    	/**
    	 * 获取全部路由
    	 * <p>
    	 * RedisRouteDefinitionWriter.java
    	 * PropertiesRouteDefinitionLocator.java
    	 *
    	 * @return
    	 */
    	@Override
    	public List<SysRouteConf> routes() {
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		return baseMapper.selectList(new EntityWrapper<>(condition));
    	}
    
    	/**
    	 * 更新路由信息
    	 *
    	 * @param routes 路由信息
    	 * @return
    	 */
    	@Override
    	public Mono<Void> editRoutes(JSONArray routes) {
    		// 清空Redis 缓存
    		Boolean result = redisTemplate.delete(CommonConstant.ROUTE_KEY);
    		log.info("清空网关路由 {} ", result);
    
    		// 遍历修改的routes,保存到Redis
    		List<RouteDefinitionVo> routeDefinitionVoList = new ArrayList<>();
    		routes.forEach(value -> {
    			log.info("更新路由 ->{}", value);
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			Map<String, Object> map = (Map) value;
    
    			Object id = map.get("routeId");
    			if (id != null) {
    				vo.setId(String.valueOf(id));
    			}
    
    			Object predicates = map.get("predicates");
    			if (predicates != null) {
    				JSONArray predicatesArray = (JSONArray) predicates;
    				List<PredicateDefinition> predicateDefinitionList =
    					predicatesArray.toList(PredicateDefinition.class);
    				vo.setPredicates(predicateDefinitionList);
    			}
    
    			Object filters = map.get("filters");
    			if (filters != null) {
    				JSONArray filtersArray = (JSONArray) filters;
    				List<FilterDefinition> filterDefinitionList
    					= filtersArray.toList(FilterDefinition.class);
    				vo.setFilters(filterDefinitionList);
    			}
    
    			Object uri = map.get("uri");
    			if (uri != null) {
    				vo.setUri(URI.create(String.valueOf(uri)));
    			}
    
    			Object order = map.get("order");
    			if (order != null) {
    				vo.setOrder(Integer.parseInt(String.valueOf(order)));
    			}
    
    			redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, vo.getId(), vo);
    			routeDefinitionVoList.add(vo);
    		});
    
    		// 逻辑删除全部
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		this.delete(new EntityWrapper<>(condition));
    
    		//插入生效路由
    		List<SysRouteConf> routeConfList = routeDefinitionVoList.stream().map(vo -> {
    			SysRouteConf routeConf = new SysRouteConf();
    			routeConf.setRouteId(vo.getId());
    			routeConf.setFilters(JSONUtil.toJsonStr(vo.getFilters()));
    			routeConf.setPredicates(JSONUtil.toJsonStr(vo.getPredicates()));
    			routeConf.setOrder(vo.getOrder());
    			routeConf.setUri(vo.getUri().toString());
    			return routeConf;
    		}).collect(Collectors.toList());
    		this.insertBatch(routeConfList);
    		log.debug("更新网关路由结束 ");
    
    		this.applicationEventPublisher.publishEvent(new RefreshRoutesEvent(this));
    		return Mono.empty();
    	}
    }
  1. 网关自定义RedisRouteDefinitionRepository

    /**
     * @author lengleng
     * @date 2018/10/31
     * <p>
     * redis 保存路由信息,优先级比配置文件高
     */
    @Slf4j
    @Component
    @AllArgsConstructor
    public class RedisRouteDefinitionWriter implements RouteDefinitionRepository {
    	private final RedisTemplate redisTemplate;
    
    	@Override
    	public Mono<Void> save(Mono<RouteDefinition> route) {
    		return route.flatMap(r -> {
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			BeanUtils.copyProperties(r, vo);
    			log.info("保存路由信息{}", vo);
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, r.getId(), vo);
    			return Mono.empty();
    		});
    	}
    	@Override
    	public Mono<Void> delete(Mono<String> routeId) {
    		routeId.subscribe(id -> {
    			log.info("删除路由信息{}", id);
    			redisTemplate.opsForHash().delete(CommonConstant.ROUTE_KEY, id);
    		});
    		return Mono.empty();
    	}
    
    	/**
    	 * 动态路由入口
    	 *
    	 * @return
    	 */
    	@Override
    	public Flux<RouteDefinition> getRouteDefinitions() {
    		redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    		List<RouteDefinitionVo> values = redisTemplate.opsForHash().values(CommonConstant.ROUTE_KEY);
    		List<RouteDefinition> definitionList = new ArrayList<>();
    		values.forEach(vo -> {
    			RouteDefinition routeDefinition = new RouteDefinition();
    			BeanUtils.copyProperties(vo, routeDefinition);
    			definitionList.add(vo);
    		});
    		log.debug("redis 中路由定义条数: {}, {}", definitionList.size(), definitionList);
    		return Flux.fromIterable(definitionList);
    	}
    }

3.库表定义

本文来自云栖社区合作伙伴“开源中国”

本文作者:冷冷gg

原文链接

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore &nbsp; &nbsp; ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库&nbsp;ECS 实例和一台目标数据库&nbsp;RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&amp;RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
7天前
|
Java 开发者 Spring
Spring Cloud Gateway 中,过滤器的分类有哪些?
Spring Cloud Gateway 中,过滤器的分类有哪些?
15 3
|
9天前
|
负载均衡 Java 网络架构
实现微服务网关:Zuul与Spring Cloud Gateway的比较分析
实现微服务网关:Zuul与Spring Cloud Gateway的比较分析
21 5
|
1月前
|
安全 Java 开发者
强大!Spring Cloud Gateway新特性及高级开发技巧
在微服务架构日益盛行的今天,网关作为微服务架构中的关键组件,承担着路由、安全、监控、限流等多重职责。Spring Cloud Gateway作为新一代的微服务网关,凭借其基于Spring Framework 5、Project Reactor和Spring Boot 2.0的强大技术栈,正逐步成为业界的主流选择。本文将深入探讨Spring Cloud Gateway的新特性及高级开发技巧,助力开发者更好地掌握这一强大的网关工具。
112 6
|
3月前
|
资源调度 Java 调度
Spring Cloud Alibaba 集成分布式定时任务调度功能
Spring Cloud Alibaba 发布了 Scheduling 任务调度模块 [#3732]提供了一套开源、轻量级、高可用的定时任务解决方案,帮助您快速开发微服务体系下的分布式定时任务。
14661 25
|
2月前
|
XML 数据库 数据格式
Spring5入门到实战------14、完全注解开发形式 ----JdbcTemplate操作数据库(增删改查、批量增删改)。具体代码+讲解 【终结篇】
这篇文章是Spring5框架的实战教程的终结篇,介绍了如何使用注解而非XML配置文件来实现JdbcTemplate的数据库操作,包括增删改查和批量操作,通过创建配置类来注入数据库连接池和JdbcTemplate对象,并展示了完全注解开发形式的项目结构和代码实现。
Spring5入门到实战------14、完全注解开发形式 ----JdbcTemplate操作数据库(增删改查、批量增删改)。具体代码+讲解 【终结篇】
|
3月前
|
负载均衡 Java Spring
Spring cloud gateway 如何在路由时进行负载均衡
Spring cloud gateway 如何在路由时进行负载均衡
328 15
|
2月前
|
Java 应用服务中间件 nginx
【Azure Spring Apps】Spring App部署上云遇见 502 Bad Gateway nginx
【Azure Spring Apps】Spring App部署上云遇见 502 Bad Gateway nginx
|
3月前
|
Java Spring
spring cloud gateway在使用 zookeeper 注册中心时,配置https 进行服务转发
spring cloud gateway在使用 zookeeper 注册中心时,配置https 进行服务转发
68 3
|
2月前
|
存储 Java API
下一篇
无影云桌面