Spring Cloud Gateway 数据库存储路由信息的扩展方案

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介:

动态路由背景

无论你在使用Zuul还是Spring Cloud Gateway 的时候,官方文档提供的方案总是基于配置文件配置的方式

例如:

# zuul 的配置形式
  routes:
    pig-auth:
      path: /auth/**
      serviceId: pig-auth
      stripPrefix: true
  # gateway 的配置形式
  routes:
  - id: pigx-auth
  	uri: lb://pigx-auth
    predicates:
    - Path=/auth/**
    filters:
    - ValidateCodeGatewayFilter

配置更改需要重启服务,不能满足实际生产过程中的动态刷新、实时变更的业务需求。

​ 基于以上分析 pig已经提供了基于Zuul版本的动态路由功能,附Git 地址传送门,效果如下图可以实时配置修改刷新。

Spring Cloud Gateway 路由加载源码

  1. DispatcherHandler 接管用户请求
  2. RoutePredicateHandlerMapping 路由匹配
    1. 根据RouteLocator获取 RouteDefinitionLocator
    2. 返回多个RouteDefinitionLocator.getRouteDefinitions()的路由定义信息
  3. FilteringWebHandler执行路由定义中的filter 最后路由到具体的业务服务中

Spring Cloud Gateway 默认动态路由实现

GatewayControllerEndpoint 基于actuate端点的默认实现,支持JVM 级别的动态路由,不能序列化存储


// 上图动态路由的信息保存的默认实现是基于内存的实现
public class InMemoryRouteDefinitionRepository implements RouteDefinitionRepository {
	private final Map<String, RouteDefinition> routes = synchronizedMap(new LinkedHashMap<String, RouteDefinition>());
	@Override
	public Mono<Void> save(Mono<RouteDefinition> route){}
	@Override
	public Mono<Void> delete(Mono<String> routeId){}

	@Override
	public Flux<RouteDefinition> getRouteDefinitions(){}
}

扩展基于Mysql + Redis存储分布式动态组件

为什么使用Mysql的同时,又要使用Redis?

  1. spring cloud gateway 基于webflux 背压,暂时不支持mysql 数据库
  2. Redis-reactive 支持 spring cloudgateway 的背压,同时还可以实现分布式,高性能

扩展思路

  1. 增加一个路由管理模块,参考GatewayControllerEndpoint实现,启动时加载数据库中配置文件到Redis
  2. 网关模块重写RouteDefinitionRepository,getRouteDefinitions()取Redis中读取即可实现
  3. 前端配合 json-view 类似插件,直接修改展示。

具体实现

  1. 路由管理模块核心处理逻辑,获取路由和更新路由
    /**
     * @author lengleng
     * @date 2018年11月06日10:27:55
     * <p>
     * 动态路由处理类
     */
    @Slf4j
    @AllArgsConstructor
    @Service("sysRouteConfService")
    public class SysRouteConfServiceImpl extends ServiceImpl<SysRouteConfMapper, SysRouteConf> implements SysRouteConfService {
    	private final RedisTemplate redisTemplate;
    	private final ApplicationEventPublisher applicationEventPublisher;
    
    	/**
    	 * 获取全部路由
    	 * <p>
    	 * RedisRouteDefinitionWriter.java
    	 * PropertiesRouteDefinitionLocator.java
    	 *
    	 * @return
    	 */
    	@Override
    	public List<SysRouteConf> routes() {
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		return baseMapper.selectList(new EntityWrapper<>(condition));
    	}
    
    	/**
    	 * 更新路由信息
    	 *
    	 * @param routes 路由信息
    	 * @return
    	 */
    	@Override
    	public Mono<Void> editRoutes(JSONArray routes) {
    		// 清空Redis 缓存
    		Boolean result = redisTemplate.delete(CommonConstant.ROUTE_KEY);
    		log.info("清空网关路由 {} ", result);
    
    		// 遍历修改的routes,保存到Redis
    		List<RouteDefinitionVo> routeDefinitionVoList = new ArrayList<>();
    		routes.forEach(value -> {
    			log.info("更新路由 ->{}", value);
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			Map<String, Object> map = (Map) value;
    
    			Object id = map.get("routeId");
    			if (id != null) {
    				vo.setId(String.valueOf(id));
    			}
    
    			Object predicates = map.get("predicates");
    			if (predicates != null) {
    				JSONArray predicatesArray = (JSONArray) predicates;
    				List<PredicateDefinition> predicateDefinitionList =
    					predicatesArray.toList(PredicateDefinition.class);
    				vo.setPredicates(predicateDefinitionList);
    			}
    
    			Object filters = map.get("filters");
    			if (filters != null) {
    				JSONArray filtersArray = (JSONArray) filters;
    				List<FilterDefinition> filterDefinitionList
    					= filtersArray.toList(FilterDefinition.class);
    				vo.setFilters(filterDefinitionList);
    			}
    
    			Object uri = map.get("uri");
    			if (uri != null) {
    				vo.setUri(URI.create(String.valueOf(uri)));
    			}
    
    			Object order = map.get("order");
    			if (order != null) {
    				vo.setOrder(Integer.parseInt(String.valueOf(order)));
    			}
    
    			redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, vo.getId(), vo);
    			routeDefinitionVoList.add(vo);
    		});
    
    		// 逻辑删除全部
    		SysRouteConf condition = new SysRouteConf();
    		condition.setDelFlag(CommonConstant.STATUS_NORMAL);
    		this.delete(new EntityWrapper<>(condition));
    
    		//插入生效路由
    		List<SysRouteConf> routeConfList = routeDefinitionVoList.stream().map(vo -> {
    			SysRouteConf routeConf = new SysRouteConf();
    			routeConf.setRouteId(vo.getId());
    			routeConf.setFilters(JSONUtil.toJsonStr(vo.getFilters()));
    			routeConf.setPredicates(JSONUtil.toJsonStr(vo.getPredicates()));
    			routeConf.setOrder(vo.getOrder());
    			routeConf.setUri(vo.getUri().toString());
    			return routeConf;
    		}).collect(Collectors.toList());
    		this.insertBatch(routeConfList);
    		log.debug("更新网关路由结束 ");
    
    		this.applicationEventPublisher.publishEvent(new RefreshRoutesEvent(this));
    		return Mono.empty();
    	}
    }
  1. 网关自定义RedisRouteDefinitionRepository

    /**
     * @author lengleng
     * @date 2018/10/31
     * <p>
     * redis 保存路由信息,优先级比配置文件高
     */
    @Slf4j
    @Component
    @AllArgsConstructor
    public class RedisRouteDefinitionWriter implements RouteDefinitionRepository {
    	private final RedisTemplate redisTemplate;
    
    	@Override
    	public Mono<Void> save(Mono<RouteDefinition> route) {
    		return route.flatMap(r -> {
    			RouteDefinitionVo vo = new RouteDefinitionVo();
    			BeanUtils.copyProperties(r, vo);
    			log.info("保存路由信息{}", vo);
    			redisTemplate.opsForHash().put(CommonConstant.ROUTE_KEY, r.getId(), vo);
    			return Mono.empty();
    		});
    	}
    	@Override
    	public Mono<Void> delete(Mono<String> routeId) {
    		routeId.subscribe(id -> {
    			log.info("删除路由信息{}", id);
    			redisTemplate.opsForHash().delete(CommonConstant.ROUTE_KEY, id);
    		});
    		return Mono.empty();
    	}
    
    	/**
    	 * 动态路由入口
    	 *
    	 * @return
    	 */
    	@Override
    	public Flux<RouteDefinition> getRouteDefinitions() {
    		redisTemplate.setHashValueSerializer(new Jackson2JsonRedisSerializer<>(RouteDefinitionVo.class));
    		List<RouteDefinitionVo> values = redisTemplate.opsForHash().values(CommonConstant.ROUTE_KEY);
    		List<RouteDefinition> definitionList = new ArrayList<>();
    		values.forEach(vo -> {
    			RouteDefinition routeDefinition = new RouteDefinition();
    			BeanUtils.copyProperties(vo, routeDefinition);
    			definitionList.add(vo);
    		});
    		log.debug("redis 中路由定义条数: {}, {}", definitionList.size(), definitionList);
    		return Flux.fromIterable(definitionList);
    	}
    }

3.库表定义

本文来自云栖社区合作伙伴“开源中国”

本文作者:冷冷gg

原文链接

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore &nbsp; &nbsp; ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库&nbsp;ECS 实例和一台目标数据库&nbsp;RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&amp;RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
14天前
|
负载均衡 Nacos 数据安全/隐私保护
SpringCloud GateWay 使用
SpringCloud GateWay 使用
21 0
|
1月前
|
负载均衡 Java API
Spring Cloud 面试题及答案整理,最新面试题
Spring Cloud 面试题及答案整理,最新面试题
133 1
|
1月前
|
Java Nacos Sentinel
Spring Cloud Alibaba 面试题及答案整理,最新面试题
Spring Cloud Alibaba 面试题及答案整理,最新面试题
196 0
|
1月前
|
SpringCloudAlibaba Java 持续交付
【构建一套Spring Cloud项目的大概步骤】&【Springcloud Alibaba微服务分布式架构学习资料】
【构建一套Spring Cloud项目的大概步骤】&【Springcloud Alibaba微服务分布式架构学习资料】
140 0
|
1月前
|
SpringCloudAlibaba Java 网络架构
【Springcloud Alibaba微服务分布式架构 | Spring Cloud】之学习笔记(七)Spring Cloud Gateway服务网关
【Springcloud Alibaba微服务分布式架构 | Spring Cloud】之学习笔记(七)Spring Cloud Gateway服务网关
87 0
|
6天前
|
负载均衡 Java 开发者
细解微服务架构实践:如何使用Spring Cloud进行Java微服务治理
【4月更文挑战第17天】Spring Cloud是Java微服务治理的首选框架,整合了Eureka(服务发现)、Ribbon(客户端负载均衡)、Hystrix(熔断器)、Zuul(API网关)和Config Server(配置中心)。通过Eureka实现服务注册与发现,Ribbon提供负载均衡,Hystrix实现熔断保护,Zuul作为API网关,Config Server集中管理配置。理解并运用Spring Cloud进行微服务治理是现代Java开发者的关键技能。
|
6天前
|
Java API 对象存储
对象存储OSS产品常见问题之使用Spring Cloud Alibaba情况下文档添加水印如何解决
对象存储OSS是基于互联网的数据存储服务模式,让用户可以安全、可靠地存储大量非结构化数据,如图片、音频、视频、文档等任意类型文件,并通过简单的基于HTTP/HTTPS协议的RESTful API接口进行访问和管理。本帖梳理了用户在实际使用中可能遇到的各种常见问题,涵盖了基础操作、性能优化、安全设置、费用管理、数据备份与恢复、跨区域同步、API接口调用等多个方面。
23 2
|
14天前
|
存储 关系型数据库 MySQL
【mybatis-plus】Springboot+AOP+自定义注解实现多数据源操作(数据源信息存在数据库)
【mybatis-plus】Springboot+AOP+自定义注解实现多数据源操作(数据源信息存在数据库)
|
15天前
|
JSON 安全 关系型数据库
SpringCloud Gateway 实现自定义全局过滤器 + JWT权限验证
SpringCloud Gateway 实现自定义全局过滤器 + JWT权限验证
|
21天前
|
负载均衡 网络协议 Java
构建高效可扩展的微服务架构:利用Spring Cloud实现服务发现与负载均衡
本文将探讨如何利用Spring Cloud技术实现微服务架构中的服务发现与负载均衡,通过注册中心来管理服务的注册与发现,并通过负载均衡策略实现请求的分发,从而构建高效可扩展的微服务系统。

热门文章

最新文章