Spring Cloud Gateway 数据库存储路由信息的扩展方案

简介:

动态路由背景

无论你在使用Zuul还是Spring Cloud Gateway 的时候,官方文档提供的方案总是基于配置文件配置的方式

例如:

# zuul 的配置形式
  routes:
    pig-auth:
      path: /auth/**
      serviceId: pig-auth
      stripPrefix: true
  # gateway 的配置形式
  routes:
  - id: pigx-auth
  	uri: lb://pigx-auth
    predicates:
    - Path=/auth/**
    filters:
    - ValidateCodeGatewayFilter

配置更改需要重启服务,不能满足实际生产过程中的动态刷新、实时变更的业务需求。

​ 基于以上分析 pig已经提供了基于Zuul版本的动态路由功能,附Git 地址传送门,效果如下图可以实时配置修改刷新。

Spring Cloud Gateway 路由加载源码

  1. DispatcherHandler 接管用户请求
  2. RoutePredicateHandlerMapping 路由匹配
    1. 根据RouteLocator获取 RouteDefinitionLocator
    2. 返回多个RouteDefinitionLocator.getRouteDefinitions()的路由定义信息
  3. FilteringWebHandler执行路由定义中的filter 最后路由到具体的业务服务中

Spring Cloud Gateway 默认动态路由实现

GatewayControllerEndpoint 基于actuate端点的默认实现,支持JVM 级别的动态路由,不能序列化存储


// 上图动态路由的信息保存的默认实现是基于内存的实现
public class InMemoryRouteDefinitionRepository implements RouteDefinitionRepository {
	private final Map<String, RouteDefinition> routes = synchronizedMap(new LinkedHashMap<String, RouteDefinition>());
	@Override
	public Mono<Void> save(Mono<RouteDefinition> route){}
	@Override
	public Mono<Void> delete(Mono<String> routeId){}

	@Override
	public Flux<RouteDefinition> getRouteDefinitions(){}
}

扩展基于Mysql + Redis存储分布式动态组件

为什么使用Mysql的同时,又要使用Redis?

  1. spring cloud gateway 基于webflux 背压,暂时不支持mysql 数据库
  2. Redis-reactive 支持 spring cloudgateway 的背压,同时还可以实现分布式,高性能

扩展思路

  1. 增加一个路由管理模块,参考GatewayControllerEndpoint实现,启动时加载数据库中配置文件到Redis
  2. 网关模块重写RouteDefinitionRepository,getRouteDefinitions()取Redis中读取即可实现
  3. 前端配合 json-view 类似插件,直接修改展示。

具体实现

  1. 路由管理模块核心处理逻辑,获取路由和更新路由
    /**
     * @author lengleng
     * @date 2018年11月06日10:27:55
     * <p>
     * 动态路由处理类
     */
    @Slf4j
    @AllArgsConstructor
    @Service("sysRouteConfService")
    public class SysRouteConfServiceImpl extends ServiceImpl<SysRouteConfMapper, SysRouteConf> implements SysRouteConfService {
    	private final RedisTemplate redisTemplate;
    	private final ApplicationEventPublisher applicationEventPublisher;
    
    	/**
    	 * 获取全部路由
    	 * <p>
    	 * RedisRouteDefinitionWriter.java
    	 * PropertiesRouteDefinitionLocator.java
    	 *
    	 * @return
    	 */
    	@Override
    	public List<SysRouteConf> routes() {
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		return baseMapper.selectList(new EntityWrapper<>(condition));
    	}
    
    	/**
    	 * 更新路由信息
    	 *
    	 * @param routes 路由信息
    	 * @return
    	 */
    	@Override
    	public Mono<Void> editRoutes(JSONArray routes) {
    		// 清空Redis 缓存
    		Boolean result = redisTemplate.delete(CommonConstant.ROUTE_KEY);
    		log.info("清空网关路由 {} ", result);
    
    		// 遍历修改的routes,保存到Redis
    		List<RouteDefinitionVo> routeDefinitionVoList = new ArrayList<>();
    		routes.forEach(value -> {
    			log.info("更新路由 ->{}", value);
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			Map<String, Object> map = (Map) value;
    
    			Object id = map.get("routeId");
    			if (id != null) {
    				vo.setId(String.valueOf(id));
    			}
    
    			Object predicates = map.get("predicates");
    			if (predicates != null) {
    				JSONArray predicatesArray = (JSONArray) predicates;
    				List<PredicateDefinition> predicateDefinitionList =
    					predicatesArray.toList(PredicateDefinition.class);
    				vo.setPredicates(predicateDefinitionList);
    			}
    
    			Object filters = map.get("filters");
    			if (filters != null) {
    				JSONArray filtersArray = (JSONArray) filters;
    				List<FilterDefinition> filterDefinitionList
    					= filtersArray.toList(FilterDefinition.class);
    				vo.setFilters(filterDefinitionList);
    			}
    
    			Object uri = map.get("uri");
    			if (uri != null) {
    				vo.setUri(URI.create(String.valueOf(uri)));
    			}
    
    			Object order = map.get("order");
    			if (order != null) {
    				vo.setOrder(Integer.parseInt(String.valueOf(order)));
    			}
    
    			redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, vo.getId(), vo);
    			routeDefinitionVoList.add(vo);
    		});
    
    		// 逻辑删除全部
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		this.delete(new EntityWrapper<>(condition));
    
    		//插入生效路由
    		List<SysRouteConf> routeConfList = routeDefinitionVoList.stream().map(vo -> {
    			SysRouteConf routeConf = new SysRouteConf();
    			routeConf.setRouteId(vo.getId());
    			routeConf.setFilters(JSONUtil.toJsonStr(vo.getFilters()));
    			routeConf.setPredicates(JSONUtil.toJsonStr(vo.getPredicates()));
    			routeConf.setOrder(vo.getOrder());
    			routeConf.setUri(vo.getUri().toString());
    			return routeConf;
    		}).collect(Collectors.toList());
    		this.insertBatch(routeConfList);
    		log.debug("更新网关路由结束 ");
    
    		this.applicationEventPublisher.publishEvent(new RefreshRoutesEvent(this));
    		return Mono.empty();
    	}
    }
  1. 网关自定义RedisRouteDefinitionRepository

    /**
     * @author lengleng
     * @date 2018/10/31
     * <p>
     * redis 保存路由信息,优先级比配置文件高
     */
    @Slf4j
    @Component
    @AllArgsConstructor
    public class RedisRouteDefinitionWriter implements RouteDefinitionRepository {
    	private final RedisTemplate redisTemplate;
    
    	@Override
    	public Mono<Void> save(Mono<RouteDefinition> route) {
    		return route.flatMap(r -> {
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			BeanUtils.copyProperties(r, vo);
    			log.info("保存路由信息{}", vo);
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, r.getId(), vo);
    			return Mono.empty();
    		});
    	}
    	@Override
    	public Mono<Void> delete(Mono<String> routeId) {
    		routeId.subscribe(id -> {
    			log.info("删除路由信息{}", id);
    			redisTemplate.opsForHash().delete(CommonConstant.ROUTE_KEY, id);
    		});
    		return Mono.empty();
    	}
    
    	/**
    	 * 动态路由入口
    	 *
    	 * @return
    	 */
    	@Override
    	public Flux<RouteDefinition> getRouteDefinitions() {
    		redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    		List<RouteDefinitionVo> values = redisTemplate.opsForHash().values(CommonConstant.ROUTE_KEY);
    		List<RouteDefinition> definitionList = new ArrayList<>();
    		values.forEach(vo -> {
    			RouteDefinition routeDefinition = new RouteDefinition();
    			BeanUtils.copyProperties(vo, routeDefinition);
    			definitionList.add(vo);
    		});
    		log.debug("redis 中路由定义条数: {}, {}", definitionList.size(), definitionList);
    		return Flux.fromIterable(definitionList);
    	}
    }

3.库表定义

本文来自云栖社区合作伙伴“开源中国”

本文作者:冷冷gg

原文链接

相关文章
|
存储 Oracle 关系型数据库
服务器数据恢复—光纤存储上oracle数据库数据恢复案例
一台光纤服务器存储上有16块FC硬盘,上层部署了Oracle数据库。服务器存储前面板2个硬盘指示灯显示异常,存储映射到linux操作系统上的卷挂载不上,业务中断。 通过storage manager查看存储状态,发现逻辑卷状态失败。再查看物理磁盘状态,发现其中一块盘报告“警告”,硬盘指示灯显示异常的2块盘报告“失败”。 将当前存储的完整日志状态备份下来,解析备份出来的存储日志并获得了关于逻辑卷结构的部分信息。
|
11月前
|
缓存 Java 应用服务中间件
Spring Boot配置优化:Tomcat+数据库+缓存+日志,全场景教程
本文详解Spring Boot十大核心配置优化技巧,涵盖Tomcat连接池、数据库连接池、Jackson时区、日志管理、缓存策略、异步线程池等关键配置,结合代码示例与通俗解释,助你轻松掌握高并发场景下的性能调优方法,适用于实际项目落地。
1898 5
|
安全 Java 数据库
Jasypt加密数据库配置信息
本文介绍了使用 Jasypt 对配置文件中的公网数据库认证信息进行加密的方法,以提升系统安全性。主要内容包括:1. 背景介绍;2. 前期准备,如依赖导入及版本选择;3. 生成密钥并实现加解密测试;4. 在配置文件中应用加密后的密码,并通过测试接口验证解密结果。确保密码安全的同时,保障系统的正常运行。
945 3
Jasypt加密数据库配置信息
|
JSON Java API
利用Spring Cloud Gateway Predicate优化微服务路由策略
Spring Cloud Gateway 的路由配置中,`predicates`​(断言)用于定义哪些请求应该匹配特定的路由规则。 断言是Gateway在进行路由时,根据具体的请求信息如请求路径、请求方法、请求参数等进行匹配的规则。当一个请求的信息符合断言设置的条件时,Gateway就会将该请求路由到对应的服务上。
1806 69
利用Spring Cloud Gateway Predicate优化微服务路由策略
|
安全 Java Nacos
0代码改动实现Spring应用数据库帐密自动轮转
Nacos作为国内被广泛使用的配置中心,已经成为应用侧的基础设施产品,近年来安全问题被更多关注,这是中国国内软件行业逐渐迈向成熟的标志,也是必经之路,Nacos提供配置加密存储-运行时轮转的核心安全能力,将在应用安全领域承担更多职责。
|
存储 关系型数据库 数据库
高性能云盘:一文解析RDS数据库存储架构升级
性能、成本、弹性,是客户实际使用数据库过程中关注的三个重要方面。RDS业界率先推出的高性能云盘(原通用云盘),是PaaS层和IaaS层的深度融合的技术最佳实践,通过使用不同的存储介质,为客户提供同时满足低成本、低延迟、高持久性的体验。
|
前端开发 Java API
Spring Cloud Gateway Server Web MVC报错“Unsupported transfer encoding: chunked”解决
本文解析了Spring Cloud Gateway中出现“Unsupported transfer encoding: chunked”错误的原因,指出该问题源于Feign依赖的HTTP客户端与服务端的`chunked`传输编码不兼容,并提供了具体的解决方案。通过规范Feign客户端接口的返回类型,可有效避免该异常,提升系统兼容性与稳定性。
916 0
|
SQL XML Java
配置Spring框架以连接SQL Server数据库
最后,需要集成Spring配置到应用中,这通常在 `main`方法或者Spring Boot的应用配置类中通过加载XML配置或使用注解来实现。
840 0
|
SQL 存储 分布式数据库
分布式存储数据恢复—hbase和hive数据库数据恢复案例
分布式存储数据恢复环境: 16台某品牌R730xd服务器节点,每台服务器节点上有数台虚拟机。 虚拟机上部署Hbase和Hive数据库。 分布式存储故障: 数据库底层文件被误删除,数据库不能使用。要求恢复hbase和hive数据库。
631 12
|
存储 SQL NoSQL
【赵渝强老师】达梦数据库的逻辑存储结构
本文介绍了达梦数据库的存储结构,包括逻辑和物理存储两部分。逻辑存储结构由数据库(Database)、表空间(Tablespaces)、段(Segments)、簇(Cluster)和页(Page)组成。数据库是最大逻辑单元,包含所有表、索引等;表空间由数据文件组成,用于存储对象;段由簇构成,簇包含连续的数据页;页是最小存储单元。文中还提供了查询表空间、段和页大小的SQL语句,并附有视频讲解和示意图。
662 7

热门文章

最新文章