Spring Cloud 学习
2024-02-21 18:08:02 3 举报
AI智能生成
Spring Cloud 学习
作者其他创作
大纲/内容
https://gitee.com/moxi159753/LearningNotes/tree/master/SpringCloud/SpringCloud2020/
1、微服务架构
2、从2.2.x和H版开始说起
被动修复Bugs
不再接受合并请求
不再发布新版本
停更不停用
停课不停学
补充,O(∩_∩)O哈哈~
Eureka 服务注册与发现
Netflix Ribbon 负载均衡
Netflix Feign 服务调用
Netflix Hystrix 服务熔断降级
Netflix Zuul 服务网关
Spring Cloud Config 服务分布式配置
Spring Boot 服务开发
SpringCloud 以前组件
Eureka
Zookeeper
Consul
Nacos
服务注册中心
Ribbon 客户端负载均衡、达到系统的HA(高可用)
LoadBalancer
负载均衡
Feign
OpenFeign
服务调用
Hystrix
resilience4j
sentienl
服务降级
Zuul
Zuul2
gateway
服务网关
Config
服务配置
Bus
服务总线
Spring Cloud升级
明细条目
由停更引发的\"升级惨案\"
https://cloud.spring.io/spring-cloud-static/Hoxton.SR1/reference/htmlsingle/
Spring Cloud英文文档
https://www.bookstack.cn/read/spring-cloud-docs/docs-index.md
Spring Cloud中文文档
Spring Cloud
https://docs.spring.io/spring-boot/docs/2.2.2.RELEASE/reference/htmlsingle/
Spring Boot
参考资料见官网
3、关于Cloud各种组件的停更/升级/替换
约定 > 配置 > 编码
1、New Project
2、聚合总父工程名字
3、Maven选版本
4、工程名字
5、字符编码
6、注解生效激活
7、java编译版本选8
8、File Type过滤
9、多个微服务启动
父工程步骤
1、微服务cloud整体聚合父工程Project
2、父工程POM
Maven中的 DependencyManagement 和 Dependencies
Maven中跳过单元测试
3、Maven 工程落地 细节复习
4、父工程创建完成执行mvn:install将父工程发布到仓库方便子工程继承
5、MySql驱动说明
IDEA新建project工作空间
创建完成后请回到父工程查看pom文件变化
1、建cloud-provider-payment8001
2、改POM
3、写YML
4、主启动
1、建表SQL
主实体Payment
CommonResult<T>
ResponseCode
Json封装响应体
2、entity
接口PaymentMapper
src\\main\esources\\mapper\\PaymentMapper.xml
文件头
路径
PaymentMapper.xml
mybaits的映射文件PaymentMapper.xml
3、mapper
接口PaymentService
实现类PaymentServiceImpl
4、service
5、controller
5、业务类
http://localhost:8001/payment/get/1
postman模拟Get请求
第一步设置 Headers
第二部设置 Body
http://localhost:8001/payment/create
postman模拟Post请求
通过修改idea的workspace.xml的方式来快速打开Run Dashboard窗口
开启Run DashBoard
部分同学可能由于idea版本不同,需要关闭重启
运行
6、测试
1、建module
7、小总结
1、cloud-provider-payment8001微服务提供者支付Module模块
1、Adding devtools to your project 下段配置我们粘贴进 8001 子项目中添加依赖
2、Adding plugin to your pom.xml下段配置我们粘贴进聚合父类总工程的pom.xml里
3、Enabling automatic build 勾选启用自动构建
①:快捷键 Ctrl + Shift + Alt + /
②:选择复选框
4、Update the value of 更新值
5、重启IDEA
2、热部署Devtools
1、建cloud-consumer-order8080
3、写YML application.yml
4、主启动 MainApp8080
entity
是什么
官网及使用
首说RestTemplate
ApplicationContextConfig
config配置类
controller
http://localhost:8080/consumer/payment/get/1
http://localhost:8080/consumer/payment/create?serial=金额100
3、cloud-consumer-order8080微服务消费者订单Module模块
系统中有重复部分,重构
观察问题
cloud-api-commons
新建
POM
maven命令clean install
删除各自的原先有过的entities文件夹
cloud-consumer-order8080
cloud-provider-payment8001
各自粘贴POM内容
订单80和支付8001分别改造
4、工程重构 cloud-api-commons
1、构建步骤
2、目前工程样图
Rest微服务工程构建
4、微服务架构编码架构
Dubbo
什么是服务治理
什么是服务注册
Eureka两组件
Eureka基础知识
建Module cloud-eureka-server7001
1.X和2.X的对比说明
改POM
写YML
@EnableEurekaServer
主启动
http://localhost:7001/
No application available 没有服务被发现 O(∩_∩)O因为没有注册服务进来当然不可能有服务被发现
结果页面
测试
IDEA生成eurekaServer端服务注册中心类似物业公司cloud-eureka-server7001
子主题
@EnableEurekaClient
先要启动EurekaServer
微服务注册名配置说明
自我保护机制
EurekaClient端cloud-provider-payment8001将注册进EurekaServer成为服务提供者provider,类似学校对外提供授课服务
YML
先要启动EurekaServer,7001服务
再要启动服务提供者provider,8001服务
eureka服务器
EurekaClient端cloud-consumer-order8080将注册进EurekaServer成为服务消费者consumer,类似上课消费的各位同学
bug
单机Eureka构建步骤
Eureka集群原理说明
Eureka集群注册原理
1、参考cloud-eureka-server7001
2、新建cloud-eureka-server7002
3、改 cloud-eureka-server7002 POM
找到C:\\Windows\\System32\\drivers\\etc路径下的hosts文件
修改映射配置添加进hosts文件
4、修改映射配置
Eureka 7001 yml文件
Eureka 7002 yml文件
5、写 Eureka YML(以前单机)
6、主启动
http://eureka7001.com:7001/
http://eureka7002.com:7002/
http://localhost:7002/
7、浏览器访问注册中心
EurekaServer集群环境构建步骤
将支付服务8001微服务发布到上面2台Eureka集群配置中
将订单服务8080微服务发布到上面2台Eureka集群配置中
①、先要启动EurekaServer,7001/7002服务
②、再要启动服务提供者provider,8001
③、再要启动消费者,8080
④、查看消费者和生产者是否注册成功
ok
⑤、http://localhost:8080/consumer/payment/get/1
测试01
参考cloud-provider-payment8001
新建cloud-provider-payment8002
直接从8001粘
业务类
8001
8002
修改8001/8002的Controller
支付服务提供者8001集群环境构建
订单服务(cloud-consumer-order8080) OrderController类中 访问地址不能写死
①、bug
订单服务(cloud-consumer-order8080) ApplicationContextConfig中不添加@LoadBalanced报异常
②、bug
提前说一下Ribbon的负载均衡功能
订单服务(cloud-consumer-order8080) ApplicationContextConfig中修改
③、使用@LoadBalanced注解赋予RestTemplate负载均衡的能力
先要启动EurekaServer,7001/7002服务
再要启动服务提供者provider,8001/8002服务
负载均衡效果达到
8001/8002端口交替出现
结果
Ribbon和Eureka整合后Consumer可以直接调用服务而不用再关心地址和端口号,且该服务还有负载功能了。O(∩_∩)O
测试02
集群Eureka构建步骤
解决的问题:含有主机名
修改部分
完整内容
修改cloud-provider-payment8001
修改之前 localhost:cloud-payment-service:8001
修改之后 payment8001
主机名称:服务名称修改
解决的问题:没有IP提示
修改之前 http://localhost:8001/actuator/info
修改之后 http://172.:8001/actuator/info
访问信息有IP信息提示
actuator微服务信息完善
对于注册进eureka里面的微服务,可以通过服务发现来获得该服务的信息
修改cloud-provider-payment8001的Controller
@EnableDiscoveryClient
8001主启动类
再启动8001主启动类,需要稍等一会儿
http://localhost:8001/payment/discovery
自测
服务发现Discovery
故障现象
一句话:某时刻某一个微服务不可用了,Eureka不会立刻清理,依旧会对该微服务的信息进行保存
属于CAP里面的AP分支
导致原因
eureka.server.enable-self-preservation=true
出厂默认,自我保护机制是开启的
使用eureka.server.enable-self-preservation = false 可以禁用自我保护模式
关闭效果
在eurekaServer端7001处设置关闭自我保护机制
注册中心eureakeServer端7001
单位为秒(默认是30秒)
eureka.instance.lease-renewal-interval-in-seconds=30
单位为秒(默认是90秒)
eureka.instance.lease-expiration-duration-in-seconds=90
默认
配置
7001和8001都配置完成
先启动7001再启动8001访问结果
马上被删除了
先关闭8001
生产者客户端eureakeClient端8001
怎么禁止自我保护
Eureka自我保护
5、Eureka服务注册与发现
https://github.com/Netflix/eureka/wiki
Eureka停止更新了你怎么办
https://blog.csdn.net/qq_33316784/article/details/88563482
http://www.manongjc.com/detail/6-gnqmxbkcmeasqxq.html
Windows环境下安装zookeeper 可参考:
第一步:安装包下载路径 https://download.csdn.net/download/weixin_44954939/19235391
第二步:解压到常用的安装目录
第三步:将conf目录下的zoo_sample.cfg文件,复制一份,重命名为zoo.cfg
在配置文件中新增dataDir=D:\\\\apache-zookeeper-3.6.3-bin\\\\datadataLogDir=D:\\\\apache-zookeeper-3.6.3-bin\\\\logs
第四步:修改zoo.cfg配置文件
第五步:新建文件夹,需要在安装目录下面新建一个空的data文件夹和logs文件夹
zookeeper启动
控制台窗口
第六步:zookeeper启动和控制台窗口
Windows环境下安装与使用
https://blog.csdn.net/zhangphil/article/details/100010629
Windows环境下zookeeper常用命令操作:
Zookeeper Windows下载安装步骤地址
zookeeper是一个分布式协调工具,可以实现注册中心功能
关闭Linux服务器防火墙后启动zookeeper服务器
zookeeper服务器取代Eureka服务器,zk作为服务注册中心
注册中心Zookeeper
新建cloud-provider-payment8004
主启动类
Controller
启动后问题:zookeeper版本jar包冲突问题
解决zookeeper版本jar包冲突问题
排出zk冲突后的新POM
why
启动8004注册进zookeeper
http://localhost:8004/payment/zk
验证测试1
linux环境下zookeeper
windows环境下zookeeper
获得json串后用在线工具查看试试
验证测试2
ls /services/cloud-provider-payment
服务节点是临时节点还是持久节点
思考
服务提供者
新建cloud-consumerzk-order8080
配置Bean
验证测试
http://localhost:8080/consumer/payment/zk
访问测试地址
服务消费者
SpringCloud整合Zookeeper代替Eureka
6、Zookeeper服务注册与发现
https://www.consul.io/intro/index.html
提供HTTP和DNS两种发现方式。
服务发现
支持多种方式,HTTP、TCP、Docker、Shell脚本定制化监控
健康监测
Key、Value的存储方式
KV存储
Consul支持多数据中心
多数据中心
可视化Web界面
能干嘛
https://www.consul.io/downloads.html
①、下载地址
②、windows版下载后的文件(你可以选择任何系统)
添加 计算机 右键 属性 高级属性设置环境变量设置在path下加上:D:\\consul_1.9.5_windows_amd64
③、配置环境变量
第一步:Consul 默认启动为 dev 模式
第二步:consul agent -dev
④、启动
输入网址:http://localhost:8500
⑤、校验
下载和安装
https://www.springcloud.cc/spring-cloud-consul.html
怎么玩
Consul简介
https://learn.hashicorp.com/consul/getting-started/install.html
官网安装说明
consul -version
下载完成后只有一个consul.exe文件,硬盘路径下双击运行,查看版本号信息
consul agent -dev
通过以下地址可以访问Consul的首页:http://localhost:8500
使用开发模式启动
安装并运行Consul
cloud-providerconsul-payment8006
新建Module支付服务provider8006
业务类Controller
http://localhost:8006/payment/consul
http://localhost:8500/ui/dc1/services
cloud-consumerconsul-order8080
新建Module消费服务order8080
http://localhost:8080/consumer/payment/consul
C:Consistency(强一致性)
A:Availability(可用性)
P:Partition tolerance(分区容错性)
CAP理论关注粒度是数据,而不是整体系统设计的策略
CAP
AP(Eureka)
CP(Zookeeper/Consul)
经典CAP图
三个注册中心异同点
7、Consul服务注册与发现
https://github.com/Netflix/ribbon/wiki/Getting-Started
未来替换方案
Ribbon目前也进入维护模式
官网资料
集中式LB
进程内LB
LB(负载均衡)
前面我们讲解过了8080通过轮询负载访问8001/8002
负载均衡+RestTemplate调用
一句话
能干吗
概述
总结:Ribbon其实就是一个软负载均衡的客户端组件,他可以和其他所需请求的客户端结合使用,和eureka结合只是其中的一个实例。
架构说明
https://docs.spring.io/spring-framework/docs/5.2.2.RELEASE/javadoc-api/org/springframework/web/client/RestTemplate.html
官网
案例代码
getForObject方法/getForEntity方法
postForObject/postForEntity
GET请求方法
POST请求方法
二说RestTemplate的使用
Ribbon负载均衡演示
轮询 (ruang 的 ruai 本如)
com.netflix.loadbalancer.RoundRobinRule
随机
com.netflix.loadbalancer.RandomRule
先按照RoundRobinRule的策略获取服务,如果获取服务失败则在指定时间内会进行重试,获取可用的服务
com.netflix.loadbalancer.RetryRule
对RoundRobinRule的扩展,响应速度越快的实例选择权重越大,越容易被选择
WeightedResponseTimeRule
会先过滤掉由于多次访问故障而处于断路器跳闸状态的服务,然后选择一个并发量最小的服务
BestAvailableRule
先过滤掉故障实例,再选择并发较小的实例
AvailabilityFilteringRule
ZoneAvoidanceRule
IRule:根据特定算法中从服务列表中选取一个要访问的服务
修改cloud-consumer-order80
①
②
注意配置细节
com.wtl.myrule
新建package
上面包下新建MySelfRule规则类
主启动类添加@RibbonClient
如何替换
Ribbon核心组件IRule
原理
RoundRobinRule源码
7001/7002集群启动
8001/8002微服务改造
①、ApplicationContextBean去掉注解@LoadBalanced
②、新建com.wtl.springcloud.lb
③、LoadBalancer接口
④、新建com.wtl.springcloud.lb.impl
⑤、LoadBalancerImpl
⑥、OrderController
http://localhost:8080/consumer/payment/lb
⑦、测试
8080订单微服务改造
自己试着写一个本地负载均衡器试试
手写
Ribbon负载均衡算法
8、Ribbon负载均衡服务器调用
Feign是一个声明式的Web服务客户端,让编写Web服务客户端变得非常容易,只需创建一个接口并在接口上添加注解即可
https://github.com/spring-cloud/spring-cloud-openfeign
GitHub
OpenFeign是什么
Feign和OpenFeign两者区别
微服务调用接口+@FeignClient
接口+注解
Feign在消费端使用
新建cloud-consumer-feign-order8080
@EnableFeignClients
EnableFeignClients
@FeignClient
新建PaymentFeignService接口并新增注解@FeignClient
控制层Controller
先启动2个eureka集群7001/7002
再启动2个微服务8001/8002
启动OpenFeign启动:cloud-consumer-feign-order8080
http://localhost:8080/orderFeign/consumer/payment/get/1
Feign自带负载均衡配置项
小总结
OpenFeign使用步骤
服务提供方8001故意写暂停程序 controller
服务消费方8080添加超时方法PaymentFeignService
服务消费方8080添加超时方法OrderFeignController
http://localhost:8080/orderFeign/consumer/payment/feign/timeout
错误页面
超时设置,故意设置超时演示出错情况
OpenFeign默认等待1秒钟,超过后报错
OpenFeign默认支持Ribbon
服务消费方8080、YML文件里需要开启OpenFeign客户端超时控制
OpenFeign超时控制
日志打印功能
日志级别
配置日志bean
YML文件里需要开启日志的Feign客户端
后台日志查看
OpenFeign日志打印功能
9、OpenFeign服务接口调用
分布式系统面临的问题
服务熔断
接近实时的监控
。。。。。。
https://github.com/Netflix/Hystrix/wiki/How-To-Use
被动修复bugs
https://github.com/Netflix/Hystrix
Hystrix官宣,停更进维
服务器忙,请稍后再试,不让客户端等待并立刻返回一个友好提示,fallback
程序运行异常
超时
服务熔断触发服务降级
线程池/信号量打满也会导致服务降级
哪些情况会出发降级
服务降级 fallback
类比保险丝达到最大服务访问后,直接拒绝访问,拉闸限电,然后调用服务降级的方法并返回友好提示
服务的降级->进而熔断->恢复调用链路
就是保险丝
服务熔断 break
秒杀高并发等操作,严禁一窝蜂的过来拥挤,大家排队,一秒钟N个,有序进行
服务限流 flowlimit
Hystrix重要概念
新建cloud-provider-hystrix-payment8001
service
①、启动eureka7001
②、启动cloud-provider-hystrix-payment8001
http://localhost:8001/payment/hystrix/ok/1
success的方法
http://localhost:8001/payment/hystrix/timeout/1
每次调用耗费3秒钟
③、访问
以上述为根基平台,从正确->错误->降级熔断->恢复
上述module均OK
正常测试
构建
上述在非高并发情形下,还能勉强满足 but......
https://download.csdn.net/download/weixin_44954939/19763454
Jmeter 下载路径
D:\\apache-jmeter-5.1.1\\binjmeter.bat
Jmeter 启动
新建线程组
Jmeter 使用
Jmeter安装和使用
1、新建线程组
2、线程组数据信息配置
①、开启Jmeter,来20000个并发压死8001,20000个请求都去访问paymentInfo_TimeOut服务
1、Jmeter 新建 HTTP请求
2、HTTP请求参数配置
②、再来一个访问
③、浏览器再次访问 http://localhost:8001/payment/hystrix/ok/1
两个都在自己转圈圈
为什么会被卡死
④、看演示结果
Jmeter压测测试
上面还是服务提供者8001自己测试,假如此时外部的消费者8080也来访问,那消费者只能干等,最终导致消费端8080不满意,服务端8001直接被拖死
Jmeter压测结论
cloud-consumer-feign-hystrix-order8080
PaymentHystrixService
OrderHystirxController
http://localhost:8080/consumer/payment/hystrix/ok/1
2W个线程压8001
消费端8080微服务再去访问正常的Ok微服务8001地址
要么转圈圈等待
要么消费端报超时错误
消费者8080,o(╥﹏╥)o
高并发测试
看热闹不嫌弃事大,8080新建加入
8001同一层次的其它接口服务被困死,因为tomcat线程池里面的工作线程已经被挤占完毕
8080此时调用8001,客户端访问响应缓慢,转圈圈
故障现象和导致原因
正因为有上述故障或不佳表现才有我们的降级/容错/限流等技术诞生
上诉结论
超时不再等待
超时导致服务器变慢(转圈)
出错要有兜底
出错(宕机或程序运行出错)
对方服务(8001)超时了,调用者(8080)不能一直卡死等待,必须有服务降级
对方服务(8001)down机了,调用者(8080)不能一直卡死等待,必须有服务降级
解决
如何解决?解决的要求
@HystrixCommand
降级配置
设置自身调用超时时间的峰值,峰值内可以正常运行,超过了需要有兜底的方法处理,作服务降级fallback
8001先从自身找问题
一旦调用服务方法失败并抛出了错误信息后,会自动调用@HystrixCommand标注好的fallbackMethod调用类中的指定方法
图示
@HystrixCommand报异常后如何处理
业务类启用
添加新注解@EnableCircuitBreaker
主启动类激活
8001fallback
我们自己配置过的热部署方式对java代码的改动明显,但对@HystrixCommand内属性的修改建议重启微服务
题外话,切记
8001业务类启用 PaymentService
8080 YML
@EnableHystrix
8080 主启动
Service
8080 业务类
http://localhost:8080/consumer/payment/hystrix/timeout/1
8080fallback
每个业务方法对应一个兜底的方法,代码膨胀
统一和自定义的分开
目前问题
feign接口系列
说明
@DefaultProperties(defaultFallback = \"\")
Controller中使用
controller配置
http://localhost:8080/consumer/payment/hystrix/exception/2
每个方法配置一个???膨胀
服务降级,客户端去调用服务端,碰上服务端宕机或关闭
本次案例服务降级处理是在客户端80实现完成的,与服务端8001没有关系只需要为Feign客户端定义的接口添加一个服务降级处理的实现类即可实现解耦
宕机
未来我们要面对的异常
再看我们的业务类PaymentController
修改cloud-consumer-feign-hystrix-order8080
根据cloud-consumer-feign-hystrix-order8080已经有的PaymentHystrixService接口,重新新建一个类(PaymentFallbackService)实现该接口,统一为接口里面的方法进行异常处理
PaymentFallbackService类实现PaymentHystrixService接口
PaymentHystrixService接口
单个eureka先启动7001
PaymentHystrixMain8001启动
OrderHystrixMain8080 启动
正常访问测试
故意关闭微服务8001
此时服务端provider已经down了,但是我们做了服务降级处理,让客户端在服务端不可用时也会获得提示信息而不会挂起耗死服务器
客户端自己调用提示
和业务逻辑混一起???混乱
解决问题
一句话就是家里的保险丝
断路器
https://martinfowler.com/bliki/CircuitBreaker.html
大神论文
熔断是什么
修改cloud-provider-hystrix-payment8001
why配置这些参数
PaymentService
PaymentController
自测cloud-provider-hystrix-payment8001
http://localhost:8001/payment/circuit/1
正确
http://localhost:8001/payment/circuit/-1
错误
一次正确一次错误 try try
多次进行错误请求测试,直到正确的请求后也错误 测试成功,然后在进行多次的正确请求、直到正确请求成功...
重点测试
实操
大神结论
请求不再进行调用当前服务,内部设置时钟一般为MTTR(平均故障处理时间),当打开时长达到所设时钟则进入半熔断状态
熔断打开
熔断关闭不会对服务进行熔断
熔断关闭
部分请求根据规则调用当前服务,如果请求成功且符合规则则认为当前服务恢复正常,关闭熔断
熔断半开
熔断类型
官网步骤
断路器在什么情况下开始起作用
1、当满足一定的阀值的时候(默认10秒内超过20个请求次数)
2、当失败率达到一定的时候(默认10秒内超过50%的请求失败)
3、到达以上阀值,断路器将会开启
4、当开启的时候,所有请求都不会进行转发
5、一段时间之后(默认是5秒),这个时候断路器是半开状态,会让其中一个请求进行转发。如果成功,断路器会关闭,若失败,继续开启。重复第4 和 第5步
断路器开启或者关闭的条件
断路器打开之后
All配置
官网断路器流程图
原理(小总结)
后面高级篇讲解alibaba的Sentinel说明
服务限流
Hystrix案例
https://github.com/Netflix/Hystrix/wiki/How-it-Works
蓝色:调用路径
红色:返回路径
1、选择一个Hystrix注册方式
2、二选一即可
3、判断缓存中是否包含需要返回的内容(如果有直接返回)
4、断路器是否为打开状态(如果是,直接跳转到8,返回)
5、断路器为健康状态,判断是否有可用资源(没有,直接跳转8)
6、构造方法和Run方法
7、将正常,超时,异常的消息发送给断路器
8、调用getFallback方法,也就是服务降级
9、直接返回正确结果
完整的请求路线:
官网图例
步骤说明
Hystrix工作流程
新建cloud-consumer-hystrix-dashboard9001
HystrixDashboardMain9001+新注解@EnableHystrixDashboard
所有Provider微服务提供类(8001/8002/8003)都需要监控依赖配置
http://localhost:9001/hystrix
启动cloud-consumer-hystrix-dashboard9001该微服务后续将监控微服务8001
仪表盘9001
1、pom.xml中一定要有这两个依赖
2、注意:新版本Hystrix需要在主启动类 MainAppHystrix8001中指定监控路径
3、Unable to connect to Command Metric Stream.
4、404
启动1个eureka或者3个eureka集群均可
填写监控地址
http://localhost:8001/hystrix.stream
9001监控8001
上述测试通过
监控结果,成功
监控结果,失败
先访问正确地址,再访问错误地址,再正确地址,会发现图示断路器都是慢慢放开的。
测试地址
7色
1圈
1线
如图所示:
整图说明
整图说明2
如何看?
搞懂一个才能看懂复杂的
观察监控窗口
监控测试
断路器演示(服务监控hystrixDashboard)
服务监控HystrixDashboard
10、Hystrix断路器
https://github.com/Netflix/zuul/wiki/Getting-Started
https://cloud.spring.io/spring-cloud-static/spring-cloud-netflix/2.2.1.RELEASE/reference/html/#router-and-filter-zuul
路由
过滤
又称金丝雀发布
灰度发布
概述简介
路由功能负责将外部请求转发到具体的服务实例上去,是实现统一访问入口的基础
功能
新建Module模块cloud-zuul-gateway9527
127.0.0.1 myzuul.com
hosts修改
@EnableZuulProxy
三个eureka集群
一个服务提供类microservicecloud-provider-dept-8001
一个路由
启动
http://localhost:8001/paymentInfo
不用路由
zuul映射配置+注册中心注册后对外暴露的服务名称+rest调用地址
http://myzuul.com:9527/cloud-provider-payment/paymentInfo
启用路由
路由基本配置
工程microservicecloud-zuul-gateway-9527
http://myzuul.com:9527/weixin/paymentInfo
路由访问OK
原路径访问OK
此时问题
代理名称
如果不想使用默认的路由规则,可以添加以下配置来忽略默认路由配置
上一步配置后,cloud-provider-payment就不行了
单个具体,多个可以用\"*\"
原有真实服务名忽略
建模块cloud-provider-sms8008
启动8008并成功注册进eureka服务器上
服务提供者SMS短信模块
修改YML,体现路由转发和负载均衡
由于Zuul自动集成了Ribbon和Hystrix,所以Zuul天生就有负载均衡和服务容错能力
修改我们的zuul服务9527
路由转发
http://myzuul.com:9527/mysms/sms
微信服务找8001/8002
短信服务找8008
路由转发和负载均衡功能
http://myzuul.com:9527/atguigu/weixin/paymentInfo
http://myzuul.com:9527/atguigu/mysms/sms
http://myzuul.com:9527/atguigu/cloud-provider-payment/paymentInfo
设置统一公共前缀
最后YML
路由访问映射规则
http://localhost:9527/actuator/routes
查看路由详细信息
查看路由信息
过滤功能负责对请求过程进行额外的处理,是请求校验过滤及服务聚合的基础。
过滤器的生命周期
pre:在请求被路由到目标服务前执行,比如权限校验、打印日志等功能;
routing:在请求被路由到目标服务时执行
post:在请求被路由到目标服务后执行,比如给目标服务的响应添加头信息,收集统计数据等功能;
error:请求在其他阶段发生错误时执行。
过滤类型
数字小的先执行
过滤顺序
shouldFilter方法为true走
过滤是否开启
自己的业务逻辑
执行逻辑
ZuulFilter
前置过滤器,用于在请求路由到目标服务前打印请求日志
业务代码
在调用8008之前会打印日志
开关,YML配置
案例Case
过滤器
11、Zuul路由网关
https://github.com/Netflix/zuul/wiki
上一代zuul 1.X
https://cloud.spring.io/spring-cloud-static/spring-cloud-gateway/2.2.1.RELEASE/reference/html/
当前gateway
SpringCloud Gateway 使用的Webflux中的reactor-netty响应式编程组件,底层使用了Netty通讯框架。
源码架构
一句话:
反向代理
鉴权
流量控制
熔断
日志监控
微服务架构中网关在哪里
1、neflix不太靠谱,zuul2.0一直跳票,迟迟不发布
如图所示
2、SpringCloud Gateway具有如下特性
3、SpringCloud Gateway 与 Zuul的区别
我们为什么选择Gateway?
Zuul1.x模型
https://docs.spring.io/spring/docs/current/spring-framework-reference/web-reactive.html#webflux-new-framework
WebFlux是什么
GateWay模型
有Zuul了怎么又出来了gateway
路由是构建网关的基本模块,它由ID,目标URI,一系列的断言和过滤器组成,如果断言为true则匹配该路由
Route(路由)
参考的是Java8的java.util.function.Predicate开发人员可以匹配HTTP请求中的所有内容(例如请求头或请求参数),如果请求与断言相匹配则进行路由
Predicate(断言)
指的是Spring框架中GatewayFilter的实例,使用过滤器,可以在请求被路由前或者之后对请求进行修改。
Filter(过滤)
总体
三大核心概念
官网总结
路由转发+执行过滤器链
核心逻辑
Gateway工作流程
cloud-gateway-gateway9527
新建Module
无
get
lb
cloud-provider-payment8001看看controller的访问地址
我们目前不想暴露8001端口,希望在8001外面套一层9527
9527网关如何做路由映射那???
YML新增网关配置
启动7001
启动8001
启动9527网关
http://localhost:8001/payment/lb
添加网关前
http://localhost:9527/payment/lb
http://localhost:9527/payment/get/1
添加网关后
访问说明
见前面的步骤
在配置文件yml中配置
如图实例
官网案例
http://news.baidu.com/guonei
百度国内新闻网址,需要外网
百度新闻
通过9527网关访问到外网的百度新闻网址
业务需求
config
业务实现
编码
http://localhost:9527/
自己写一个
代码中注入RouteLocator的Bean
Gateway网关路由有两种配置方式:
YML配置说明
入门配置
默认情况下Gateway会根据注册中心注册的服务列表,以注册中心上微服务名为路径创建动态路由进行转发,从而实现动态路由的功能
一个eureka7001 + 两个服务提供者8001/8002
启动:
需要注意的是uri的协议为lb,表示启用Gateway的负载均衡功能。
lb://serviceName是spring cloud gateway在微服务中自动为我们创建的负载均衡uri
8001/8002两个端口切换
通过微服务名实现动态路由
启动我们的gateway9527
Route Predicate Factories这个是什么东东?
①、After Route Predicate
②、Before Route Predicate
③、Between Route Predicate
curl http://localhost:9527/payment/lb
不带cookies访问
curl http://localhost:9527/payment/lb --cookie \"username=wtl\"
加入curl返回中文乱码 :Windows下安装使用Curl及解决中文乱码问题
带上cookies访问
④、Cookie Route Predicate
curl http://localhost:9527/payment/lb -H \"X-Request-Id:123\"
⑤、Header Route Predicate
curl http://localhost:9527/payment/lb -H \"Host:www.wtl.com\"
⑥、Host Route Predicate
curl http://localhost:9527/payment/lb -GET
⑦、Method Route Predicate
⑧、Path Route Predicate
http://localhost:9527/payment/lb?username=123
⑨、Query Route Predicate
All
说白了,Predicate就是为了实现一组匹配规则,让请求过来找到对应的Route进行处理。
⑩、小总结
常用的Route Predicate
Predicate的使用
业务逻辑之前 pre
业务逻辑之后 post
生命周期,Only Two :业务逻辑之前和业务逻辑之后
https://cloud.spring.io/spring-cloud-static/spring-cloud-gateway/2.2.1.RELEASE/reference/html/#gatewayfilter-factories
单一的 GatewayFilter,31种之多
https://cloud.spring.io/spring-cloud-static/spring-cloud-gateway/2.2.1.RELEASE/reference/html/#global-filters
全局的 GlobalFilter,10种之多
种类,Only Two
Spring Cloud Gateway的Filter
AddRequestParameter
省略
常用的GatewayFilter
implements font color=\"#d32f2f\
两个主要接口介绍
全局日志记录
统一网关鉴权
http://localhost:9527/payment/lb?uname=张三
没有参数uname
无法正常使用转发
自定义全局GlobalFilter
自定义过滤器
Filter的使用
12、Gateway新一代网关
分布式系统面临的---配置问题
集中管理配置文件
不同环境不同配置,动态化的配置更新,分环境部署比如dev/test/prod/beta/release
运行期间动态调整配置,不再需要在每个服务部署的机器上编写配置文件,服务会向配置中心统一拉取配置自己的信息
当配置发生变动时,服务不需要重启即可感知到配置的变化并应用新的配置
post、curl访问刷新均可......
将配置信息以REST接口的形式暴露
与GitHub整合配置
https://cloud.spring.io/spring-cloud-static/spring-cloud-config/2.2.1.RELEASE/reference/html/
如图所示 https://gitee.com/wtl0616/springcloud-config
用你自己的账号在GitHub上新建一个名为springcloud-config的新Repository(温馨提示:这里我用的gitee)
git clone https://gitee.com/wtl0616/springcloud-config.git
由上一步获得刚新建的git地址
本地地址:E:\\cloud2021\\springcloud-config
git命令
本地硬盘目录上新建git仓库并clone
表示多个环境的配置文件
保存格式必须为UTF-8
git add .
git commit -m \"init yml\"
git push origin master
如果需要修改,此处模拟运维人员操作git和github
E:\\cloud2021\\springcloud-config
此时在本地E盘符下E:\\cloud2021\\springCloud-config
新建Module模块 : cloud-config-center-3344它即为Cloud的配置中心模块cloudConfig Center
@EnableConfigServer
ConfigCenterMain3344
C:\\Windows\\System32\\drivers\\etc
127.0.0.1 config-3344.com
windows下修改hosts文件,增加映射
启动注册中心:cloud-eureka-server7001
启动微服务:cloud-config-center-3344
http://config-3344.com:3344/master/config-dev.yml
测试 : 通过Config微服务是否可以从GitHub上获取配置内容
http://config-3344.com:3344/master/config-test.yml
http://config-3344.com:3344/master/config-prod.yml
master分支
http://config-3344.com:3344/dev/config-dev.yml
http://config-3344.com:3344/dev/config-test.yml
http://config-3344.com:3344/dev/config-prod.yml
dev分支
/{label}/{application}-{profile}.yml
http://config-3344.com:3344/config-dev.yml
http://config-3344.com:3344/config-test.yml
http://config-3344.com:3344/config-prod.yml
http://config-3344.com:3344/config-xxxx.yml(不存在的配置)
/{application}-{profile}.yml
http://config-3344.com:3344/config/dev/master
http://config-3344.com:3344/config/test/master
http://config-3344.com:3344/config/test/dev
/{application}/{profile}[/{label}]
重要配置细节总结
配置读取规则
成功实现了用SpringCloud Config通过GitHub获取配置信息
Config服务端配置 3344 与测试
新建cloud-config-client-3355
内容
bootstrap.yml
修改config-dev.yml配置并提交到GitHub中,比如加个变量age或者版本号version
类ConfigClientMain3355
启动Config配置中心3344微服务并自测
http://localhost:3355/configInfo
启动3355作为Client准备访问
成功实现了客户端3355访问SpringCloud Config3344通过GitHub获取配置信息
Linux运维修改GitHub上的配置文件内容做调整
刷新3344,发现ConfigServer配置中心立刻响应
刷新3355,发现ConfigClient客户端没有任何响应
3355没有变化除非自己重启或者重新加载
难到每次运维修改配置文件,客户端都需要重启??噩梦
问题随时而来,分布式配置的动态刷新问题
Config客户端配置 3355 与测试
避免每次更新配置都要重启客户端微服务3355
修改3355模块
POM引入actuator监控
修改YML,暴露监控端口
@RefreshScope业务类Controller修改
没有,/(ㄒoㄒ)/~~
3355改变没有???
此时修改github---> 3344 ---->3355
必须是POST请求
curl -X POST \"http://localhost:3355/actuator/refresh\"
需要运维人员发送Post请求刷新3355
How
OK,O(∩_∩)O
避免了服务重启
成功实现了客户端3355刷新到最新配置内容
再次
步骤
动态刷新
假如有多个微服务客户端3355/3366/3377。。。。。。
每个微服务都要执行一次post请求,手动刷新?
可否广播,一次通知,处处生效?
我们想大范围的自动刷新,求方法
想想还有什么问题?
Config客户端之动态刷新
application.yml
项目结构
sm-config-dev.yml
http://localhost:3344/master/sm-config-dev.yml
Config服务端配置 3344 本地项目
重启3344
此时修改3344 ---->3355
Config客户端配置 3355 本地项目
Config本地模拟真实项目配置
13、SpringCloud Config 分布式配置中心
分布式自动刷新配置功能
Spring Cloud Bus 配合 Spring Cloud Config 使用可以实现配置的动态刷新。
上一讲解的加深和扩充,一言以蔽之
Bus支持两种消息代理:RabbitMQ 和 Kafka
为何被称为总线
http://erlang.org/download/otp_win64_21.3.exe
https://download.csdn.net/download/weixin_44954939/19869656
小编博客免费下载地址:
直接下一步就可以
安装Erlang,下载地址:
https://github.com/rabbitmq/rabbitmq-server/releases/download/v3.7.9-rc.3/rabbitmq-server-3.7.9-rc.3.exe
官网地址 http://www.rabbitmq.com/install-windows.html
https://download.csdn.net/download/weixin_44954939/19869640
安装RabbitMQ,下载地址:
https://developers.blog.csdn.net/article/details/100892294
环境配置也可参考
安装目录
ERLANG_HOME
新建 ERLANG_HOME
%ERLANG_HOME%\\bin
配置 path
Erlang 环境变量配置
RABBITMQ_SERVER
新建 RABBITMQ_SERVER
%RABBITMQ_SERVER%\\sbin
快捷键 Win + R 输入 cmd 打开命令行窗口输入 rabbitmq-service 验证环境配置完成
验证环境配置完成
RabbitMQ 环境变量配置
cmd
D:\abbitmq-server-3.7.9-rc\abbitmq_server-3.7.9-rc.3\\sbin
rabbitmq-plugins enable rabbitmq_management
http://localhost:15672/
测试 RabbitMQ 可视化插件 访问地址查看
启动 RabbitMQ 输入以下命令启动管理功能
输入账号密码并登录:guest guest
RabbitMQ环境配置
必须先具备良好的RabbitMQ环境先
新建 cloud-config-client-3366
演示广播效果,增加复杂度,再以3355为模板再制作一个3366
2)利用消息总线触发一个服务端ConfigServer的/bus/refresh端点,而刷新所有客户端的配置
打破了微服务的职责单一性,因为微服务本身是业务模块,它本不应该承担配置刷新的职责。
破坏了微服务各节点的对等性。
有一定的局限性。例如,微服务在迁移时,它的网络地址常常会发生变化,此时如果想要做到自动刷新,那就会增加更多的修改
图二的架构显然更加适合,图一不适合的原因如下
设计思想
给cloud-config-center-3344配置中心服务端添加消息总线支持
给cloud-config-client-3355客户端添加消息总线支持
给cloud-config-client-3366客户端添加消息总线支持
修改Github上配置文件增加版本号
curl -X POST \"http://localhost:3344/actuator/bus-refresh\"
一次发送,处处生效
发送POST请求
运维工程师
配置中心
http://localhost:3366/configInfo
获取配置信息,发现都已经刷新了
客户端
O(∩_∩)O
一次修改,广播通知,处处生效
SpringCloud Bus动态刷新全局广播
只通知3355
不通知3366
不想全部通知,只想定点通知
指定具体某一个实例生效而不是全部
destination:服务名称+端口号
公式:http://localhost:配置中心的端口号/actuator/bus-refresh/{destination}
/bus/refresh请求不再发送到具体的服务实例上,而是发给config server并通过destination参数类指定需要更新配置的服务或实例
简单一句话
我们这里以刷新运行在3355端口上的config-client为例
curl -X POST \"http://localhost:3344/actuator/bus-refresh/config-client:3355\"
案例
通知总结All
SpringCloud Bus动态刷新定点通知
14、SpringCloud Bus 消息总线
https://spring.io/projects/spring-cloud-stream#overview
https://cloud.spring.io/spring-cloud-static/spring-cloud-stream/3.0.1.RELEASE/reference/html/
https://m.wang1314.com/doc/webapp/topic/20971999.html
Spring Cloud Stream中文指导手册
Message
生产者/消费者之间靠消息媒介传递信息内容
消息通道MessageChannel
消息必须走特定的通道
消息通道MessageChannel的子接口SubscribableChannel,由MessageHandler消息处理器所订阅
消息通道里的消息如何被消费呢,谁负责收发处理
标准MQ
stream凭什么可以统一底层差异?
INPUT对应于消费者
OUTPUT对应于生产者
Binder
为什么用Cloud Stream
在RabbitMQ就是Exchange
在Kakfa中就是Topic
Topic主题进行广播
Stream中的消息通信方式遵循了发布-订阅模式
很方便的连接中间件,屏蔽差异
通道,是队列Queue的一种抽象,在消息通讯系统中就是实现存储和转发的媒介,通过Channel对队列进行配置
Channel
简单的可理解为参照对象是Spring Cloud Stream自身,从Stream发布消息就是输出,接受消息就是输入。
Source和Sink
Spring Cloud Stream标准流程套路
编码API和常用注解
消息驱动概述
RabbitMQ环境已经OK
cloud-stream-rabbitmq-provider8801, 作为生产者进行发消息模块
cloud-stream-rabbitmq-consumer8802,作为消息接收模块
cloud-stream-rabbitmq-consumer8803 作为消息接收模块
工程中新建三个子模块
案例说明
新建Module : cloud-stream-rabbitmq-provider8801
主启动类StreamMQMain8801
发送消息接口
发送消息接口实现类
启动7001eureka
启动rabbitmq
启动8801
http://localhost:8801/sendMessage
访问
消息驱动之生产者
新建Module : cloud-stream-rabbitmq-consumer8802
主启动类StreamMQMain8802
测试8801发送8802接收消息
消息驱动之消费者
cloud-stream-rabbitmq-consumer8803
依照8802,clone出来一份运行8803
RabbitMQ
服务注册
7001
消息生产
8801
消息消费
8802
8803
有重复消费问题
消息持久化问题
运行后有两个问题
重要
分组和持久化属性group
如何解决
生产实际案例
目前是8802/8803同时都收到了,存在重复消费问题
消费
微服务应用放置于同一个group中,就能够保证消息只会被其中一个应用消费一次。不同的组是可以消费的,同一个组内会发生竞争关系,只有其中一个可以消费。
group: atguiguA、atguiguB
8802修改YML
8803修改YML
我们自己配置
还是重复消费
结论
8802/8803都变成不同组,group两个不同
8802/8803实现了轮询分组,每次只有一个消费者8801模块的发的消息只能被8802或8803其中一个接收到,这样避免了重复消费。
group: atguiguA
同一个组的多个微服务实例,每次只会有一个拿到
8802/8803都变成相同组,group两个相同
分组
通过上述,解决了重复消费问题,再看看持久化
8803的分组group: atguiguA没有去掉
停止8802/8803并去除掉8802的分组group: atguiguA
8801先发送4条消息到rabbitmq
先启动8802,无分组属性配置,后台没有打出来消息
再启动8803,有分组属性配置,后台打出来了MQ上的消息
持久化
分组消费与持久化
15、SpringCloud Stream 消息驱动
问题
为什么会出现这个技术?需要解决哪些问题?
https://github.com/spring-cloud/spring-cloud-sleuth
Spring Cloud Sleuth提供了一套完整的服务跟踪的解决方案
在分布式系统中提供追踪解决方案并且兼容支持了zipkin
SpringCloud从F版起已不需要自己构建Zipkin Server了,只需调用jar包即可
https://dl.bintray.com/openzipkin/maven/io/zipkin/java/zipkin-server/
zipkin-server-2.12.9-exec.jar
下载
运行jar
http://localhost:9411/zipkin/
完整的调用链路
上图what
Trace:类似于树结构的Span集合,表示一条调用链路,存在唯一标识
span:表示调用链路来源,通俗的理解span就是一次请求信息
名词解释
术语
运行控制台
1、zipkin
业务类PaymentController
2、服务提供者
cloud-consumer-order80
业务类OrderController
3、服务消费者(调用方)
80调用8001几次测试下
4、依次启动eureka7001/8001/80
查看
会出现以下界面
查看依赖关系
5、打开浏览器访问:http://localhost:9411
搭建链路监控步骤
16、SpringCloud Sleuth 分布式请求链路跟踪
https://spring.io/blog/2018/12/12/spring-cloud-greenwich-rc1-available-now
Spring Cloud Netflix项目进入维护模式
什么是维护模式
进入维护模式意味着什么呢?
Spring Cloud Netflix Projects Entering Maintenance Mode
why会出现SpringCloud alibaba
https://github.com/alibaba/spring-cloud-alibaba/blob/master/README-zh.md
去哪下
SpringCloud alibaba带来了什么
https://spring.io/projects/spring-cloud-alibaba#overview
https://github.com/alibaba/spring-cloud-alibaba
https://spring-cloud-alibaba-group.github.io/github-pages/greenwich/spring-cloud-alibaba.html
英文
中文
SpringCloud alibaba学习资料获取
17、SpringCloud Alibaba 入门简介
前四个字母分别为Naming和Configuration的前两个字母,最后的s为Service。
为什么叫Nacos
一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。
Nacos: Dynamic Naming and Configuration Service
Nacos = Eureka+Config +Bus
等价于
Nacos就是注册中心 + 配置中心的组合
替代Eureka做服务注册中心
替代Config做服务配置中心
https://github.com/alibaba/Nacos
https://nacos.io/zh-cn/index.html
https://spring-cloud-alibaba-group.github.io/github-pages/greenwich/spring-cloud-alibaba.html#_spring_cloud_alibaba_nacos_discovery
官网文档
各种注册中心比较
Nacos简介
本地Java8+Maven环境已经OK
https://github.com/alibaba/nacos/releases
先从官网下载Nacos
解压安装包,直接运行bin目录下的startup.cmd
默认账号密码都是nacos
命令运行成功后直接访问http://localhost:8848/nacos
安装并运行Nacos
https://spring-cloud-alibaba-group.github.io/github-pages/greenwich/spring-cloud-alibaba.html#_spring_cloud_alibaba_nacos_config
新建Module : cloudalibaba-provider-payment9001
父POM
本模块POM
http://localhost:9001/payment/nacos/1
nacos控制台
nacos服务注册中心+服务提供者9001都OK了
新建cloudalibaba-provider-payment9002
9002其它步骤你懂的
或者取巧不想新建重复体力劳动,直接拷贝虚拟端口映射
为了下一章节演示nacos的负载均衡,参照9001新建9002
基于Nacos的服务提供者
新建Module : cloudalibaba-consumer-nacos-order83
为什么nacos支持负载均衡
ApplicationContextBean
OrderNacosController
83访问9001/9002,轮询负载OK
http://localhost:83/consumer/payment/nacos/13
基于Nacos的服务消费者
Nacos全景图所示
Nacos和CAP
Nacos 支持AP和CP模式的切换
切换
各种注册中心对比
服务注册中心对比
Nacos作为服务注册中心演示
cloudalibaba-config-nacos-client3377
why配置两个
bootstrap
application
ConfigClientController
@RefreshScope
Nacos中的dataid的组成格式及与SpringBoot配置文件中的匹配规则
理论
配置新增
${spring.application.name}-${spring.profiles.active}.${spring.cloud.nacos.config.file-extension}
公式:
prefix 默认为 spring.application.name 的值
spring.profile.active 即为当前环境对应的 profile,可以通过配置项 spring.profile.active 来配置。
file-exetension 为配置内容的数据格式,可以通过配置项 spring.cloud.nacos.config.file-extension 来配置
小总结说明
设置DataId
Nacos界面配置对应
Nacos会记录配置文件的历史版本默认保留30天,此外还有一键回滚功能,回滚操作将会触发配置更新
回滚
历史配置
Nacos中的匹配规则
在Nacos中添加配置信息
启动前需要在nacos客户端-配置管理-配置管理栏目下有对应的yaml配置文件
运行cloud-config-nacos-client3377的主启动类
http://localhost:3377/config/info
调用接口查看配置信息
修改下Nacos中的yaml配置文件,再次调用查看配置的接口,就会发现配置已经刷新
自带动态刷新
Nacos作为配置中心-基础配置
多环境多项目管理
配置管理
命名空间
Nacos的图形化管理界面
Namespace+Group+Data ID三者关系?为什么这么设计?
指定spring.profile.active和配置文件的DataID来使不同环境下读取不同的配置
新建dev配置DataID
新建test配置DataID
默认空间+默认分组+新建dev和test两个DataID
通过spring.profile.active属性就能进行多环境下配置文件的读取
test
配置是什么就加载什么
DataID方案
新建Group
通过Group实现环境区分
在nacos图形界面控制台上面新建配置文件DataID
在config下增加一条group的配置即可。可配置为DEV_GROUP或TEST_GROUP
bootstrap+application
Group方案
新建dev/test的Namespace
回到服务管理-服务列表查看
按照域名配置填写
Namespace方案
三种方案加载配置
Case
Nacos作为配置中心-分类配置
Nacos作为服务配置中心演示
https://nacos.io/zh-cn/docs/cluster-mode-quick-start.html
官网架构图(写的o(╥﹏╥)o)
上图官网翻译,真实情况
按照上述,我们需要mysql数据库
https://nacos.io/zh-cn/docs/deployment.html
重点说明
官网说明
https://github.com/alibaba/nacos/blob/develop/config/pom.xml
Nacos默认自带的是嵌入式数据库derby
nacos-mysql.sql
执行脚本
nacos-server-1.1.4\acos\\conf目录下找到sql脚本
nacos-server-1.1.4\acos\\conf目录下找到application.properties
derby到mysql切换配置步骤
启动Nacos,可以看到是个全新的空记录界面,以前是记录进derby
Nacos持久化配置解释
预计需要,1个Nginx+3个nacos注册中心+1个mysql
https://github.com/alibaba/nacos/releases/tag/1.1.4
nacos-server-1.1.4.tar.gz
解压后安装
Nacos下载Linux版
SQL脚本在哪里
sql语句源文件
执行后结果
自己Linux机器上的Mysql数据库粘贴
1、Linux服务器上mysql数据库配置
位置
2、application.properties 配置
梳理出3台nacos集器的不同服务端口号
复制出cluster.conf
这个IP不能写127.0.0.1,必须是Linux命令hostname -i能够识别的IP
3、Linux服务器上nacos的集群配置cluster.conf
/mynacos/nacos/bin 目录下有startup.sh
在什么地方,修改什么,怎么修改
修改内容
执行方式
4、编辑Nacos的启动脚本startup.sh,使它能够接受不同的启动端口
修改nginx的配置文件
nginx.conf
按照指定启动
5、Nginx的配置,由它作为负载均衡器
http://192.168.111.144:1111/nacos/#/login
测试通过nginx访问nacos
新建一个配置测试
linux服务器的mysql插入一条记录
6、截止到此处,1个Nginx+3个nacos注册中心+1个mysql
集群配置步骤(重点)
yml
微服务cloudalibaba-provider-payment9002启动注册进nacos集群
高可用小总结
Linux版Nacos+MySQL生产环境配置
Nacos集群和持久化配置(重要)
18、SpringCloud Alibaba Nacos服务注册和配置中心
https://github.com/alibaba/Sentinel
https://github.com/alibaba/Sentinel/wiki/%E4%BB%8B%E7%BB%8D
一句话解释,之前我们讲解过的Hystrix
https://github.com/alibaba/Sentinel/releases
https://spring-cloud-alibaba-group.github.io/github-pages/greenwich/spring-cloud-alibaba.html#_spring_cloud_alibaba_sentinel
服务雪崩
服务使用中的各种问题
Sentinel
后台
前台8080
sentinel组件由2部分构成
下载到本地sentinel-dashboard-1.7.0.jar
java8环境OK
8080端口不能被占用
前提
java -jar sentinel-dashboard-1.7.0.jar
命令
运行命令
http://localhost:8080
登录账号密码均为sentinel
访问sentinel管理界面
安装步骤
安装Sentinel控制台
http://localhost:8848/nacos/#/login
启动Nacos8848成功
cloudalibaba-sentinel-service8401
业务类FlowLimitController
Module
启动Sentinel8080
启动微服务8401
空空如也,啥都没有
http://localhost:8401/testA
http://localhost:8401/testB
执行一次访问即可
效果
Sentinel采用的懒加载说明
sentinel8080正在监控微服务8401
启动8401微服务后查看sentienl控制台
初始化演示工程
进一步解释说明
基本介绍
系统默认
直接->快速失败
配置及说明
快速点击访问http://localhost:8401/testA
Blocked by Sentinel (flow limiting)
类似有个fallback的兜底方法?
思考???
直接(默认)
当关联的资源达到阈值时,就限流自己
当与A关联的资源B达到阀值后,就限流A自己
B惹事,A挂了
配置A
访问testB成功
postman里新建多线程集合组
将访问地址添加进新新线程组
大批量线程高并发访问B,导致A失效了
Run
postman模拟并发密集访问testB
点击访问http://localhost:8401/testA
运行后发现testA挂了
关联
多个请求调用了同一个微服务
家庭作业试试
链路
流控模式
直接失败,抛出异常
com.alibaba.csp.sentinel.slots.block.flow.controller.DefaultController
源码
直接->快速失败(默认的流控处理)
默认coldFactor为3,即请求 QPS 从 threshold / 3 开始,经预热时长逐渐升至设定的 QPS 阈值。
https://github.com/alibaba/Sentinel/wiki/%E9%99%90%E6%B5%81---%E5%86%B7%E5%90%AF%E5%8A%A8
限流 冷启动
com.alibaba.csp.sentinel.slots.block.flow.controller.WarmUpController
WarmUp配置
刚开始不行,后续慢慢OK
多次点击http://localhost:8401/testB
应用场景
预热
匀速排队,阈值必须设置为QPS
https://github.com/alibaba/Sentinel/wiki/%E6%B5%81%E9%87%8F%E6%8E%A7%E5%88%B6
com.alibaba.csp.sentinel.slots.block.flow.controller.RateLimiterController
排队等待
流控效果
流控规则
https://github.com/alibaba/Sentinel/wiki/%E7%86%94%E6%96%AD%E9%99%8D%E7%BA%A7
进一步说明
半开的状态系统自动去检测是否请求有异常,没有异常就关闭断路器恢复使用,有异常则继续打开断路器不可用。具体可以参考Hystrix
复习Hystrix
Sentinel的断路器是没有半开状态的
代码
jmeter压测
RT
jmeter
异常比例
异常数是按照分钟统计的
异常数
降级策略实战
降级规则
https://github.com/alibaba/Sentinel/wiki/%E7%83%AD%E7%82%B9%E5%8F%82%E6%95%B0%E9%99%90%E6%B5%81
@SentinelResource
承上启下复习start
com.alibaba.csp.sentinel.slots.block.BlockException
@SentinelResource(value = \"testHotKey\")
异常打到了前台用户界面看到,不友好
1
@SentinelResource(value = \"testHotKey\
方法testHotKey里面第一个参数只要QPS超过每秒1次,马上降级处理
用了我们自己定义的
2
http://localhost:8401/testHotKey?p1=abc
error
http://localhost:8401/testHotKey?p1=abc&p2=33
http://localhost:8401/testHotKey?p2=abc
right
上述案例演示了第一个参数p1,当QPS超过1秒1次点击后马上被限流
超过1秒钟一个后,达到阈值1后马上被限流
普通
我们期望p1参数当它是某个特殊值时,它的限流值和平时不一样
假如当p1的值等于5时,它的阈值可以达到200
特例
特例情况
添加按钮不能忘
http://localhost:8401/testHotKey?p1=5
http://localhost:8401/testHotKey?p1=3
当p1等于5的时候,阈值变为200
当p1不等于5的时候,阈值就是平常的1
热点参数的注意点,参数必须是基本类型或者String
前提条件
参数例外项
后面讲
手贱添加异常看看....../(ㄒoㄒ)/~~
其它
热点key限流
https://github.com/alibaba/Sentinel/wiki/%E7%B3%BB%E7%BB%9F%E8%87%AA%E9%80%82%E5%BA%94%E9%99%90%E6%B5%81
各项配置参数说明
配置全局QPS
系统规则
启动Nacos成功
启动Sentinel成功
业务类RateLimitController
配置步骤
图形配置和代码关系
表示1秒钟内查询次数大于1,就跑到我们自定义的处流,限流
配置流控规则
1秒钟点击1下,OK
超过上述,疯狂点击,返回了自己定义的限流处理信息,限流发生
此时关闭问服务8401看看
临时/持久?
Sentinel控制台,流控规则消失了?????
额外问题
按资源名称限流+后续处理
通过访问的URL来限流,会返回Sentinel自带默认的限流处理信息
http://localhost:8401/rateLimit/byUrl
访问一次
Sentinel控制台配置
疯狂点击http://localhost:8401/rateLimit/byUrl
按照Url地址限流+后续处理
上面兜底方案面临的问题
创建CustomerBlockHandler类用于自定义限流处理逻辑
CustomerBlockHandler
自定义限流处理类
RateLimitController
http://localhost:8401/rateLimit/customerBlockHandler
启动微服务后先调用一次
测试后我们自定义的出来了
客户自定义限流处理逻辑
多说一句
SphU定义资源
Tracer定义统计
ContextUtil定义了上下文
Sentinel主要有三个核心Api
更多注解属性说明
sentinel整合ribbon+openFeign+fallback
启动nacos和sentinel
记得修改不同的端口号
http://localhost:9003/paymentSQL/1
提供者9003/9004
新建cloudalibaba-consumer-nacos-order84
热部署对java代码级生效及时
对@SentinelResource注解内属性,有时效果不好
修改后请重启微服务
fallback管运行异常
blockHandler管配置违规
目的
http://localhost:84/consumer/fallback/1
给客户error页面,不友好
没有任何配置
图说
本例sentinel无配置
只配置fallback
本例sentinel需配置
只配置blockHandler
fallback和blockHandler都配置
程序异常打到前台了,对用户不友好
忽略属性.......
CircleBreakerController
消费者84
Ribbon系列
84消费者调用提供者9003
Feign组件一般是消费侧
修改84模块
激活Sentinel对Feign的支持
带@FeignClient注解的业务接口
fallback = PaymentFallbackService.class
添加@EnableFeignClients启动Feign的功能
http://localhost:84/consumer/paymentSQL/1
测试84调用9003,此时故意关闭9003微服务提供者,看84消费侧自动降级,不会被耗死
Feign系列
熔断框架比较
服务熔断功能
一旦我们重启应用,sentinel规则将消失,生产环境需要将配置规则进行持久化
将限流配置规则持久化进Nacos保存,只要刷新8401某个rest地址,sentinel控制台的流控规则就能看到,只要Nacos里面的配置不删除,针对8401上sentinel上的流控规则持续有效
添加Nacos数据源配置
内容解析
添加Nacos业务规则配置
启动8401后刷新sentinel发现业务规则有了
快速访问测试接口
停止8401再看sentinel
乍一看还是没有,稍等一会儿
多次调用
重新配置出现了,持久化验证通过
重新启动8401再看sentinel
规则持久化
19、SpringCloud Alibaba Sentinel实现熔断与限流
20、SpringCloud Alibaba Seata处理分布式事务
21、知识点
22、Github代码地址:
Spring Cloud 学习
0 条评论
回复 删除
下一页