Sentinel流量防卫兵

简介: Sentinel流量防卫兵

前言

在我们平常工作中,总会有这样的事情发生:服务无法承受过多的请求而被打挂。

一般我们可以从两个方面处理:

  1. 增加节点,水平扩展(钱总是万能的)
  2. 对请求量过高的接口进行限流(没钱也不是不可以)

突发情况下我们会先用第一种方案,然后再过渡到第二种。毕竟:穷就一个字

随着这样的事情发生多了,系统就会可以预计的朝这样的方向演变:

  • 单个接口的限流 -> 多个接口的限流
    觉醒能力:限流可以配置,想要对哪个接口进行限流,就改下配置,立即生效。
  • 单个系统需要限流 -> 多个系统需要限流
    觉醒能力:限流功能组件化,后续还有系统需要限流功能,引入依赖即可,不需要重复开发。
  • 等等

通过这样的推论:每个系统都会发生高并发 -> 每个系统都会朝这个方向演变 -> 总有演变了很久的系统 -> 网上是否已经存在这样的轮子?

别说,真的有!今天我们要认识的主角Sentinel就是这样的又大又圆的轮子~

介绍

随着微服务的流行,服务和服务之间的稳定性变得越来越重要。Sentinel 是面向分布式服务架构的流量控制组件,主要以流量为切入点,从流量控制、熔断降级、系统自适应保护等多个维度来帮助您保障微服务的稳定性。

官网地址:https://sentinelguard.io/zh-cn/

话不多说,先来个案例感受感受

案例

需求:要求每秒钟通过的qps限定在20

注:案例中所有统计相关的代码只是为了更加直观的体现sentinel的作用

引入依赖:

<dependency>
  <groupId>com.alibaba.csp</groupId>
  <artifactId>sentinel-core</artifactId>
  <version>1.8.2</version>
</dependency>

1. 定义流控规则

private void initFlowRules() {
  // 定义流控规则
  FlowRule rule = new FlowRule();
  // 资源名与需要限流的资源名相同
  rule.setResource("HelloWorld");
  // 设置限流方式为QPS
  rule.setGrade(RuleConstant.FLOW_GRADE_QPS);
  // 设置QPS为20
  rule.setCount(20);
  // 加载规则
  FlowRuleManager.loadRules(Collections.singletonList(rule));
}

2. 模拟请求

// 记录请求总数
private static final AtomicInteger TOTAL = new AtomicInteger();
// 记录请求通过数
private static final AtomicInteger PASS = new AtomicInteger();
// 记录请求拒绝数
private static final AtomicInteger BLOCK = new AtomicInteger();
private void request() {
  for (int i = 0; i < 30; i++) {
    new Thread(() -> {
      while (true){
        // 记录总qps
        TOTAL.incrementAndGet();
        // 进行限流
        try (Entry entry = SphU.entry("HelloWorld")) {
          // 记录通过数
          PASS.incrementAndGet();
        } catch (BlockException e) {
          // 记录拒绝数
          BLOCK.incrementAndGet();
        }
        // 模拟业务等待0-50毫秒
        try {
          TimeUnit.MILLISECONDS.sleep(new Random().nextInt(50));
        } catch (InterruptedException ignored) {
        }
      }
    }).start();
  }
}

3. 统计

public void count() {
  new Thread(() -> {
    int oldTotal = 0, oldPass = 0, oldBlock = 0;
    while (true){
      // 计算当前qps
      int total = TOTAL.get();
      int secondsTotal = total - oldTotal;
      oldTotal = total;
      // 计算每秒通过数
      int pass = PASS.get();
      int secondsPass = pass - oldPass;
      oldPass = pass;
      // 计算每秒拒绝数
      int block = BLOCK.get();
      int secondsBlock = block - oldBlock;
      oldBlock = block;
      log.info("当前qps:{}, pass: {}, block:{}", secondsTotal, secondsPass, secondsBlock);
      try {
        // 停顿一秒
        TimeUnit.SECONDS.sleep(1);
      } catch (InterruptedException ignored) {
      }
    }
  }).start();
}

4.测试

@Test
public void testBlock() throws IOException {
  // 初始化规则
  this.initFlowRules();
  // 模拟高并发访问
  this.request();
  // 统计qps
  this.count();
  // 防止程序终止
  System.in.read();
}

5.测试结果

总体来说,测试结果符合预期

思考

以上案例是最简单的入门案例,也是Sentinel的核心所在。

其中关键的代码便是:SphU.entry("HelloWorld")

如果还想在其他业务代码中增加限流,则需要做出如下修改并增加流控规则

try (Entry entry = SphU.entry("资源名")) {
    // 业务代码
} catch (BlockException e) {
    // 根据异常进行处理
}

但是很明显,这是一个通用代码块,唯一的变量就是"资源名",我们很容易就想到通过切面的方式进行优化

如果是你,你会想要怎么改造它呢?

我们先来看看Sentinel的切面使用方式吧

整合SpringBoot

1.引入注解依赖

<dependency>
  <groupId>com.alibaba.csp</groupId>
  <artifactId>sentinel-annotation-aspectj</artifactId>
  <version>1.8.2</version>
</dependency>

2. 编写Controller&Servcie的Demo

@RestController
@RequestMapping("/foo")
public class FooController {
    @Autowired
    private FooService fooService;
    @GetMapping
    public String hello(String name) {
        return fooService.hello(name);
    }
}
public interface FooService {
    String hello(String name);
}
@Service
public class FooServiceImpl implements FooService {
    @Override
    public String hello(String name){
        return "hello " + name;
    }
}

3. 开启切面

@Configuration
public class SentinelAspectConfiguration {
    @Bean
    public SentinelResourceAspect sentinelResourceAspect() {
        return new SentinelResourceAspect();
    }
}

4. 增加注解与限流处理

@SentinelResource(value = "hello", blockHandler = "exceptionHandler")
@Override
public String hello(String name){
  return "hello " + name;
}
public String exceptionHandler(String name, BlockException ex) {
  return "被限流了";
}

blockHandler: 限流对应的处理方法,方法参数和返回值与业务方法相同,对应着入门案例中的catch逻辑

关于SentinelResource注解的更多信息:https://github.com/alibaba/Sentinel/wiki/%E6%B3%A8%E8%A7%A3%E6%94%AF%E6%8C%81

5. 配置流控规则启动

@SpringBootApplication
public class SentinelDemoApplication {
    public static void main(String[] args) {
        // 初始化流控规则
        initFlowRules();
        SpringApplication.run(SentinelDemoApplication.class, args);
    }
    private static void initFlowRules(){
        // 定义流控规则
        FlowRule rule = new FlowRule();
        // 资源名注解中的相同
        rule.setResource("hello");
        // 设置限流方式为QPS
        rule.setGrade(RuleConstant.FLOW_GRADE_QPS);
        // 设置QPS为2
        rule.setCount(2);
        // 加载规则
        FlowRuleManager.loadRules(Collections.singletonList(rule));
    }
}

6.测试

curl 'http://localhost:8080/foo?name=张三'

7.结果

在页面上多刷新几次就将出现我们在exceptionHanlder中返回的"被限流了"提示语

再次思考

整合是整合了,不知道大家有没有像我一样:有股吃了苍蝇一般的难受感

一个注解就要配一个限流规则,反正我算是吐了。

有关限流异常处理的逻辑可以使用公共的,大家可以查看上面贴出的官方文档链接

那么我们应该怎么样才能让自己内心畅通呢?

我们仔细品一下加载规则的逻辑,如果我们把这个步骤写成一个接口?

哦豁,那我这个规则岂不是想加就加,想改就改?

这里我就不演示了,因为Sentinel已经把这件事情做了,并且还很贴心的做了一个控制台~

整合Sentinel控制台

1. 安装Sentinel控制台

下载jar包

下载地址:https://github.com/alibaba/Sentinel/releases

启动

java -Dserver.port=8080 -Dcsp.sentinel.dashboard.server=localhost:8080 -Dproject.name=sentinel-dashboard -jar sentinel-dashboard.jar

默认账号密码为:sentinel sentinel

如果想要修改默认的账号密码,可增加参数

-Dsentinel.dashboard.auth.username=sentinel

-Dsentinel.dashboard.auth.password=123456

2. 添加依赖

<!-- 通信依赖 -->
<dependency>
  <groupId>com.alibaba.csp</groupId>
  <artifactId>sentinel-transport-simple-http</artifactId>
  <version>1.8.2</version>
</dependency>
<!-- webmvc适配 -->
<dependency>
  <groupId>com.alibaba.csp</groupId>
  <artifactId>sentinel-spring-webmvc-adapter</artifactId>
  <version>1.8.2</version>
</dependency>

3. 编写测试接口

@GetMapping("/test")
public String test() {
  return "ok";
}

4. 配置统一异常处理

@Slf4j
public class MyBlockExceptionHandler implements BlockExceptionHandler {
    @Override
    public void handle(HttpServletRequest request, HttpServletResponse response, BlockException e) throws Exception {
        response.setContentType(MediaType.APPLICATION_JSON_VALUE);
        response.setStatus(HttpServletResponse.SC_OK);
        try (PrintWriter out = response.getWriter()) {
            out.write(new ObjectMapper().writeValueAsString("{\"message\":\"被限流了\"}"));
            out.flush();
        }
        catch (IOException ignored) {
        }
    }
}

将处理器加入到拦截器中

@Configuration
public class InterceptorConfig implements WebMvcConfigurer {
    @Override
    public void addInterceptors(InterceptorRegistry registry) {
        // Add Sentinel interceptor
        addSpringMvcInterceptor(registry);
    }
    private void addSpringMvcInterceptor(InterceptorRegistry registry) {
        SentinelWebMvcConfig config = new SentinelWebMvcConfig();
        config.setBlockExceptionHandler(new MyBlockExceptionHandler());
        // 区分请求方式
        config.setHttpMethodSpecify(true);
        registry.addInterceptor(new SentinelWebInterceptor(config)).addPathPatterns("/**");
    }
}

6.配置控制台地址

在resources下新建sentinel.properties配置文件

#应用名称
project.name=sentinel-demo
#sentinel控制台地址
csp.sentinel.dashboard.server=localhost:8081

5.测试

第一次请求接口用于触发控制台初始化

curl 'http://localhost:8080/foo/test'

打开控制台并登录

在簇点链路栏中可以看到出现了刚才访问的资源地址

点击+流控按钮

一个qps阈值为2的规则

再次测试,多刷几次:curl 'http://localhost:8080/foo/test'

配置已然生效

眼尖的小伙伴已经发现了:左边的菜单栏好多规则可以配置,我们下次再聊吧~

问题

确实,在加入控制台之后解决了之前的问题,但是又产生了新的问题,不知道小伙伴有没有发现?

之前我们的流控规则是写在代码里的,服务停止重启都会重新加载到内存中。

现在我们把规则配置在sentinel控制台,由控制台推送到服务中。

注意:我们启动sentinel时并没有配置过数据库,所以如果服务重启了,配置会消失吗?

答案是会的,那么又怎么才能解决这个问题呢?

由于太久没更新过了,还没恢复状态,今天的内容也挺多了,下次吧~

小结

今天介绍了Sentinel这个强大的流量防护工具——虽然只是初窥门径,但不妨碍大家感受到他的强大之处。

我们从一个最基本的案例出发,通过对上一个案例的思考,引出下一个案例的解决方案,循序渐进。

同时在最后,我还留下了一点点问题供大家思考,大家也可以上官网进行寻找解决方案。

最后,希望大家有所收获~

目录
相关文章
|
11月前
|
SpringCloudAlibaba 监控 Dubbo
SpringCloudAliBaba篇 之 Sentinel:图解分布式系统的流量防卫兵(上)
SpringCloudAliBaba篇 之 Sentinel:图解分布式系统的流量防卫兵
241 0
|
20天前
|
自然语言处理 监控 开发者
springCloud之Sentinel流量路由、流量控制、流量整形、熔断降级
springCloud之Sentinel流量路由、流量控制、流量整形、熔断降级
16 0
|
11月前
|
缓存 SpringCloudAlibaba Linux
SpringCloudAliBaba篇 之 Sentinel:图解分布式系统的流量防卫兵(下)
SpringCloudAliBaba篇 之 Sentinel:图解分布式系统的流量防卫兵
91 0
|
9月前
|
运维 Java BI
千亿流量并发治理!Alibaba实战Sentinel笔记,为微服务保驾护航
随着微服务的发展及DDD领域驱动设计的兴起,越来越多的企业开始使用微服务架构。无论是项目重构,还是新项目的开发,即使项目初期没有多大的流量,但从长远考虑,企业也基本会优先使用微服务架构。但“鱼和熊掌不可兼得”,项目微服务化在提升开发效率及降低后期维护成本的同时,也加大了服务部署运维及问题排查的难度,并且容易导致服务崩溃出现级联效应,也就是“服务雪崩”。
|
12月前
|
算法 Dubbo Java
Sentinel流量防卫兵
Sentinel流量防卫兵
|
Java API Maven
SpringCloud Gateway - 集成 Sentinel 流量限流、熔断
SpringCloud Gateway - 集成 Sentinel 流量限流、熔断
2029 0
|
Sentinel
《流量太大容易挂?接入 Sentinel 让 N 个 9 成为可能!》电子版地址
流量太大容易挂?接入 Sentinel 让 N 个 9 成为可能!
70 0
《流量太大容易挂?接入 Sentinel 让 N 个 9 成为可能!》电子版地址
|
24天前
|
监控 Java Sentinel
使用Sentinel进行服务调用的熔断和限流管理(SpringCloud2023实战)
Sentinel是面向分布式、多语言异构化服务架构的流量治理组件,主要以流量为切入点,从流量路由、流量控制、流量整形、熔断降级、系统自适应过载保护、热点流量防护等多个维度来帮助开发者保障微服务的稳定性。
45 3
|
26天前
|
Java 开发者 Sentinel
Spring Cloud系列——使用Sentinel进行微服务保护
Spring Cloud系列——使用Sentinel进行微服务保护
33 5
|
10天前
|
监控 Java 应用服务中间件
SpringCloud面试之流量控制组件Sentinel详解
SpringCloud面试之流量控制组件Sentinel详解
25 0