百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

SpringCloud Gateway高阶之Sentinel限流、熔断

ztj100 2024-10-29 18:19 55 浏览 0 评论

欢迎关注头条号:老顾聊技术

精品原创技术分享,知识的组装工


目录

  1. 前言
  2. Sentinel是什么
  3. 部署Sentinel Dashboard
  4. Sentinel对网关的支持
  5. 网关限流规则
  6. 网关流控实现原理
  7. 总结

前言

为什么需要服务熔断和降级?微服务是当前业界的一大趋势,原理就是将单一职责的功能模块独立化为子服务降低服务间的耦合,服务间互相调用。但是这样也会出现一些问题:

上图中大量微服务互相调用存在大量的依赖关系,难免会出现某个服务故障,如ServiceD出现问题,导致ServiceG、ServiceF、ServiceA、ServiceB都出现问题,然后再会影响其他服务,变成级联故障,最终导致系统不可用的坍塌,也就是服务雪崩

当然还有某些场景,在一些时间段某些服务会出现高并发的情况,而某些服务占用着那些紧缺的资源显然是不太合理的,这时就需要对一些服务进行降级处理,削弱占用的系统资源

熟悉Spring Cloud的小伙伴,第一反应应该就是Hystrix。但是比较可惜的是Netflix已经宣布对Hystrix停止更新。那么还有什么更好的选择呢?除了Spring Cloud官方推荐的resilience4j之外,目前Spring Cloud Alibaba下整合的Sentinel小伙伴们可以重点考察和选型的目标。

Sentinel是什么

Sentinel 是一款由阿里开发的面向分布式服务架构的轻量级流量控制产品,主要以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度来帮助我们保护服务的稳定性。

Sentinel的使用分为两部分:

1、sentinel-dashboard:与hystrix-dashboard类似,但是它更为强大一些。除了与hystrix-dashboard一样提供实时监控之外,还提供了流控规则、熔断规则的在线维护等功能。

2、客户端整合:每个微服务客户端都需要整合sentinel的客户端封装与配置,才能将监控信息上报给dashboard展示以及实时的更改限流或熔断规则等。

部署Sentinel Dashboard

下载地址

到github上面搜素sentinel看看他的releases,现在最新的版本V1.6.3,点击下载

运行Sentinel.jar

Sentinel的默认端口是8080,当然你也可以换别的端口,在启动的时候设置一下就行了。我们启动时候要让他在后台运行。

nohup java -jar sentinel-dashboard-1.6.3.jar &

登陆Sentinel控制台

ip+端口号访问服务,用户名和密码都是:sentinel

登陆进去后,能看到流控和降级规则设置

Sentinel对网关的支持

Sentinel 支持对 Spring Cloud Gateway、Zuul 等主流的 API Gateway 进行限流。

Sentinel 1.6.0 引入了 Sentinel API Gateway Adapter Common 模块,此模块中包含网关限流的规则和自定义 API 的实体和管理逻辑:

1、GatewayFlowRule:网关限流规则,这个根据网关的自身的路由场景设计的,可以针对不同 route 或自定义的 API 分组进行限流,支持针对请求中的参数、Header、来源 IP 等进行定制化的限流。

2、ApiDefinition:用户自定义的 API 定义分组,可以看做是一些 URL 匹配的组合。比如我们可以定义一个 API 叫 my_api,请求 path 模式为 /foo/** 和 /baz/** 的都归到 my_api 这个 API 分组下面。限流的时候可以针对这个自定义的 API 分组维度进行限流

网关限流规则 GatewayFlowRule

字段解释如下:

1、resource:资源名称

网关中的 route 名称或者用户自定义的API 分组名称。

2、resourceMode

规则是针对 API Gateway 的route(RESOURCE_MODE_ROUTE_ID)还是用户在 Sentinel 中自定义的API 分组(RESOURCE_MODE_CUSTOM_API_NAME),默认是route。

3、grade

限流指标维度,同限流规则的grade字段。

4、count:限流阈值

5、intervalSec

统计时间窗口,单位是秒,默认是1 秒(目前仅对参数限流生效)。

6、controlBehavior

流量整形的控制效果,同限流规则的 controlBehavior 字段,目前支持快速失败和匀速排队两种模式,默认是快速失败

7、burst

应对突发请求时额外允许的请求数目(目前仅对参数限流生效)。

8、maxQueueingTimeoutMs

匀速排队模式下的最长排队时间,单位是毫秒,仅在匀速排队模式下生效。

9、paramItem

参数限流配置。若不提供,则代表不针对参数进行限流,该网关规则将会被转换成普通流控规则;否则会转换成热点规则。其中的字段:

parseStrategy从请求中提取参数的策略,目前支持四种模式提取来源

  • IP(PARAM_PARSE_STRATEGY_CLIENT_IP)
  • Host(PARAM_PARSE_STRATEGY_HOST)
  • 任意 Header(PARAM_PARSE_STRATEGY_HEADER)
  • 任意 URL 参数(PARAM_PARSE_STRATEGY_URL_PARAM)

fieldName:若提取策略选择 Header 模式或 URL 参数模式,则需要指定对应的 header 名称或 URL 参数名称。

pattern 和 matchStrategy:为参数匹配特性预留

可以通过 GatewayRuleManager.loadRules(rules)手动加载网关规则,或通过 GatewayRuleManager.register2Property(property)注册动态规则源动态推送(推荐方式)

网关流控实现原理

上图的整体流程如下:

1、外部请求进入API Gateway时会经过Sentinel实现的filter,其中会依次进行 路由/API 分组匹配、请求属性解析和参数组装。

2、Sentinel 会根据配置的网关流控规则来解析请求属性,并依照参数索引顺序组装参数数组,最终传入SphU.entry(res, args) 中。

3、Sentinel API Gateway Adapter Common 模块向 Slot Chain 中添加了一个 GatewayFlowSlot,专门用来做网关规则的检查。

4、GatewayFlowSlot会从GatewayRuleManager中提取生成的热点参数规则,根据传入的参数依次进行规则检查。若某条规则不针对请求属性,则会在参数最后一个位置置入预设的常量达到普通流控的效果

注意:

当通过 GatewayRuleManager 加载网关流控规则GatewayFlowRule时,无论是否针对请求属性进行限流,Sentinel底层都会将网关流控规则转化为热点参数规则ParamFlowRule,存储在GatewayRuleManager 中,与正常的热点参数规则相隔离。转换时Sentinel会根据请求属性配置,为网关流控规则设置参数索引idx,并同步到生成的热点参数规则

总结

从Sentinel的1.6.0版本开始,提供了SpringCloud Gateway的适配模块,可以提供两种资源维度的限流:

1、route 维度:即在Spring配置文件中配置的路由条目,资源名为对应的routeId

2、自定义 API 维度:用户可以利用 Sentinel 提供的 API 来自定义一些 API 分组

具体用法,老顾下一篇介绍,今天就介绍到这里,谢谢!!!


---End---

最近老顾上传了微服务网关的分享课程,请大家多多支持

推荐阅读

1、面试必备:网关异常了怎么办?如何做全局异常处理?

2、Gateway网关系列(二):SpringCloud Gateway入门实战,路由规则

3、Gateway网关系列开篇:SpringCloud的官方网关Gateway介绍

4、API网关在微服务架构中的应用,这一篇就够了

5、学习Lambda表达式看这篇就够了,不会让你失望的哦(续篇)

6、Lambda用在哪里?几种场景?

7、为什么会出现Lambda表达式,你知道吗?

8、不说“分布式事务”理论,直接上大厂阿里的解决方案,绝对实用

9、女程序员问到这个问题,让我思考了半天,Mysql的“三高”架构

10、大厂二面:CAP原则为什么只能满足其中两项?而不能同时满足

11、阿里P7二面:聊聊零拷贝的原理

12、秒杀系统的核心点都在这里,快来取

13、你了解如何利用token方式实现分布式Session吗?

14、Mysql索引结构演变,为什么最终会是那个结构呢?让你一看就懂

15、一场比赛涉及到的知识,用通俗易通的方式介绍并发协调

16、企业实战Redis全方面思考,你思考了吗?

17、面试题:Thread的start和run的区别

18、面试题:什么是CAS?CAS的作用以及缺点

19、如何访问redis中的海量数据?避免事故产生

20、如何解决Redis热点问题?以及如何发现热点?

21、如何设计API接口,实现统一格式返回?

22、你真的知道在生产环境下如何部署tomcat吗?

23、分享一线互联网大厂分布式唯一ID设计 之 snowflake方案

24、分享大厂分布式唯一ID设计方案,快来围观

25、你想了解一线大厂的分布式唯一ID生成方案吗?

26、你知道如何处理大数据量吗?(数据拆分篇)

27、如何永不迁移数据和避免热点? 根据服务器指标分配数据量(揭秘篇)

28、你知道怎么分库分表吗?如何做到永不迁移数据和避免热点吗?

29、你了解大型网站的页面静态化吗?

30、你知道如何更新缓存吗?如何保证缓存和数据库双写一致性?

31、你知道怎么解决DB读写分离,导致数据不一致问题吗?

32、DB读写分离情况下,如何解决缓存和数据库不一致性问题?

33、你真的知道怎么使用缓存吗?

34、如何利用锁,防止缓存击穿?重构思想的重要性

35、海量订单产生的业务高峰期,如何避免消息的重复消费?

36、你知道如何保障生产端100%消息投递成功吗?

37、微服务下的分布式session该如何管理?

38、阿里二面:filter、interceptor、aspect应如何选择?很多人中招

39、互联网架构重要组员CDN,很多高级开发都没有实操过,来看这里

40、阿里二面:CDN缓存控制原理,看看能不能难住你

相关推荐

Python 操作excel的坑__真实的行和列

大佬给的建议__如何快速处理excelopenpyxl库操作excel的时候,单个表的数据量大一些处理速度还能接受,如果涉及多个表甚至多个excel文件的时候速度会很慢,还是建议用pandas来处理,...

Python os.path模块使用指南:轻松处理文件路径

前言在Python编程中,文件和目录的操作是非常重要的一部分。为了方便用户进行文件和目录的操作,Python标准库提供了os模块。其中,os.path子模块提供了一些处理文件路径的函数和方法。本文主要...

Python常用内置模块介绍——文件与系统操作详解

Python提供了多个强大的内置模块用于文件和系统操作,下面我将详细介绍最常用的几个模块及其核心功能。1.os模块-操作系统交互...

Python Flask 建站框架实操教程(flask框架网页)

下面我将带您从零开始构建一个完整的Flask网站,包含用户认证、数据库操作和前端模板等核心功能。##第一部分:基础项目搭建###1.创建项目环境```bash...

为你的python程序上锁:软件序列号生成器

序列号很多同学可能开发了非常多的程序了,并且进行了...

PO设计模式全攻略,在 UI 自动化中的实践总结(以企业微信为例)

一、什么是PO设计模式?PO(PageObject)设计模式将某个页面的所有元素对象定位和对元素对象的操作封装成一个Page类,即一个py文件,并以页面为单位来写测试用例,实现页面对象和测试用例的...

这种小工具居然也能在某鱼卖钱?我用Python一天能写...

前两天在某鱼闲逛,本来想找个二手机械键盘,结果刷着刷着突然看到有人在卖——Word批量转PDF小工具...

python打包成exe,程序有图标,但是任务栏和窗口都没有显示图标

代码中指定图标信息#设置应用ID,确保任务栏图标正确显示ifsys.platform=="win32":importctypesapp_id=...

使用Python构建电影推荐系统(用python做推荐系统)

在日常数据挖掘工作中,除了会涉及到使用Python处理分类或预测任务,有时候还会涉及推荐系统相关任务。...

python爬取并分析淘宝商品信息(python爬取淘宝商品数据)

python爬取并分析淘宝商品信息背景介绍一、模拟登陆二、爬取商品信息1.定义相关参数2.分析并定义正则3.数据爬取三、简单数据分析1.导入库2.中文显示3.读取数据4.分析价格分布5.分析销售...

OpenCV入门学习基础教程(从小白变大神)

Opencv是用于快速处理图像处理、计算机视觉问题的工具,支持多种语言进行开发如c++、python、java等,下面这篇文章主要给大家介绍了关于openCV入门学习基础教程的相关资料,需要的朋友可以...

python图像处理-一行代码实现灰度图抠图

抠图是ps的最基本技能,利用python可以实现用一行代码实现灰度图抠图。基础算法是...

从头开始学python:如何用Matplotlib绘图表

Matplotlib是一个用于绘制图表的库。如果你有用过python处理数据,那Matplotlib可以更直观的帮你把数据展示出来。直接上代码看例子:importmatplotlib.pyplot...

Python爬取爱奇艺腾讯视频 250,000 条数据分析为什么李诞不值得了

在《Python爬取爱奇艺52432条数据分析谁才是《奇葩说》的焦点人物?》这篇文章中,我们从爱奇艺爬取了5万多条评论数据,并对一些关键数据进行了分析,由此总结出了一些明面上看不到的数据,并...

Python Matplotlib 库使用基本指南

简介Matplotlib是一个广泛使用的Python数据可视化库,它可以创建各种类型的图表、图形和可视化效果。无论是简单的折线图还是复杂的热力图,Matplotlib提供了丰富的功能来满足我们...

取消回复欢迎 发表评论: