最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

SpringCloudGateway?Nacos?GitlabRunner全自動(dòng)灰度服務(wù)搭建發(fā)布

 更新時(shí)間:2023年04月13日 11:11:49   作者:爛筆頭  
這篇文章主要為大家介紹了SpringCloudGateway?Nacos?GitlabRunner全自動(dòng)灰度服務(wù)搭建和發(fā)布實(shí)戰(zhàn)詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪

1 | 業(yè)務(wù)場(chǎng)景說(shuō)明

要實(shí)現(xiàn)的業(yè)務(wù)場(chǎng)景:

  • 可以根據(jù)單個(gè)用戶id或者批量用戶id,判斷是否需要灰度該用戶/批量用戶
  • 可以根據(jù)請(qǐng)求頭字段(可動(dòng)態(tài)設(shè)定的任意kv),判斷是否需要走灰度服務(wù)

2 | 具體實(shí)現(xiàn)方案

這里采用 SpringCloudGateway(SCG) + Nacos + GitlabRunner 來(lái)實(shí)現(xiàn)整個(gè)自動(dòng)化的灰度發(fā)布。

  • SCG:統(tǒng)一的流量入口 + 正常/灰度服務(wù)選擇分發(fā)邏輯處理
  • Nacos:loadbalancer 提供方,通過(guò) metadata 維護(hù)灰度服務(wù)
  • GitlabRunner:灰度服務(wù)部署的自動(dòng)化 CICD Pipeline 處理

下面分別從以上這三個(gè)組件來(lái)搭建。

2.1 | SCG

直接上代碼,通過(guò)注釋講解。

  • GrayLoadBalancerClientFilter: 自定義灰度服務(wù)負(fù)載均衡過(guò)濾器
/**
 * 通過(guò)GrayLoadBalancer過(guò)濾實(shí)例
 */
@Component
@Slf4j
public class GrayLoadBalancerClientFilter implements GlobalFilter, Ordered {
    @Resource
    private LoadBalancerClientFactory clientFactory;
    @Resource
    private CustomProperty customProperty;
    @Override
    public Mono<Void> filter(ServerWebExchange exchange, GatewayFilterChain chain) {
        URI url = exchange.getAttribute(ServerWebExchangeUtils.GATEWAY_REQUEST_URL_ATTR);
        ServerWebExchangeUtils.addOriginalRequestUrl(exchange, url);
        if (url == null || BizConstant.HTTP.equalsIgnoreCase(url.getScheme())) {
            return chain.filter(exchange);
        }
        return doFilter(exchange, chain, url);
    }
    private Mono<Void> doFilter(ServerWebExchange exchange, GatewayFilterChain chain, URI url) {
        return this.choose(exchange).doOnNext(res -> {
            if (!res.hasServer()) {
                throw NotFoundException.create(true, "Unable to find instance for ".concat(url.getHost()));
            }
            URI uri = exchange.getRequest().getURI();
            String overrideScheme = null;
            DelegatingServiceInstance delegatingServiceInstance = new DelegatingServiceInstance(res.getServer(), overrideScheme);
            URI reqUrl = this.reconstructURI(delegatingServiceInstance, uri);
            if (log.isDebugEnabled()) {
                log.debug("GrayLoadBalancerClientFilter url chosen: {}", reqUrl.toString());
            }
            exchange.getAttributes().put(ServerWebExchangeUtils.GATEWAY_REQUEST_URL_ATTR, reqUrl);
        }).then(chain.filter(exchange));
    }
    private URI reconstructURI(DelegatingServiceInstance delegatingServiceInstance, URI originalUri) {
        return LoadBalancerUriTools.reconstructURI(delegatingServiceInstance, originalUri);
    }
    private Mono<Response<ServiceInstance>> choose(ServerWebExchange exchange) {
        URI uri = exchange.getAttribute(ServerWebExchangeUtils.GATEWAY_REQUEST_URL_ATTR);
        if (uri == null) {
            throw new MMException("{} is null", ServerWebExchangeUtils.GATEWAY_REQUEST_URL_ATTR);
        }
        GrayLoadBalancer loadBalancer = new GrayLoadBalancer(clientFactory.getLazyProvider(uri.getHost(), ServiceInstanceListSupplier.class), uri.getHost(), customProperty);
        return loadBalancer.choose(this.createRequest(exchange));
    }
    private Request createRequest(ServerWebExchange exchange) {
        return new DefaultRequest(exchange.getRequest().getHeaders());
    }
    @Override
    public int getOrder() {
        return FILTER_ORDER_GRAY;
    }
}

NOTE

FILTER_ORDER_GRAY 是一個(gè) int 常量,其值不能隨意定義(如-1,0,1,2之類)。從下表可以看到,SCG 的 LoadBalancerClientFilter 執(zhí)行順序是 10100,那么 GrayLoadBalancerClientFilter 的執(zhí)行順序必須 > 10100 (否則自定義的 Filter 里就會(huì)有變量未被賦值), 這里假定 FILTER_ORDER_GRAY = 10110

  • GrayLoadBalancer: 灰度發(fā)布負(fù)載均衡策略
/**
 * 灰度發(fā)布負(fù)載均衡策略
 */
@Slf4j
public class GrayLoadBalancer implements ReactorServiceInstanceLoadBalancer {
    private ObjectProvider<ServiceInstanceListSupplier> serviceInstanceListSupplierProvider;
    private String serviceId;
    private CustomProperty customProperty;
    public GrayLoadBalancer(ObjectProvider<ServiceInstanceListSupplier> serviceInstanceListSupplierProvider, String serviceId, CustomProperty customProperty) {
        this.serviceId = serviceId;
        this.serviceInstanceListSupplierProvider = serviceInstanceListSupplierProvider;
        this.customProperty = customProperty;
    }
    @Override
    public Mono<Response<ServiceInstance>> choose(Request request) {
        HttpHeaders headers = (HttpHeaders) request.getContext();
        if (this.serviceInstanceListSupplierProvider != null) {
            ServiceInstanceListSupplier supplier = this.serviceInstanceListSupplierProvider.getIfAvailable(NoopServiceInstanceListSupplier::new);
            return supplier.get().next().map(item -> getInstanceResponse(item, headers));
        }
        return null;
    }
    private Response<ServiceInstance> getInstanceResponse(List<ServiceInstance> instances, HttpHeaders headers) {
        if (instances.isEmpty()) {
            return getServiceInstanceEmptyResponse();
        }
        return getServiceInstanceResponseByUidsOrGrayTag(instances, headers);
    }
    /**
     * 從nacos獲取服務(wù)實(shí)例列表,并根據(jù)策略返回灰度服務(wù)的實(shí)例還是正常服務(wù)的實(shí)例
     */
    private Response<ServiceInstance> getServiceInstanceResponseByUidsOrGrayTag(List<ServiceInstance> instances, HttpHeaders headers) {
        List<ServiceInstance> grayInstances = new ArrayList<>();
        List<ServiceInstance> normalInstances = new ArrayList<>();
        for (ServiceInstance instance : instances) {
            Map<String, String> metadata = instance.getMetadata();
            // nacos元數(shù)據(jù)包含“gray-tag”的key值,且value="true",則判定為灰度實(shí)例
            String isGrayInstance = metadata.get(BizConstant.GRAY_TAG);
            if (BizConstant.TRUE.equals(isGrayInstance)) {
                grayInstances.add(instance);
            } else {
                normalInstances.add(instance);
            }
        }
        //沒(méi)有灰度服務(wù),直接返回
        if (grayInstances.isEmpty()) {
            return new DefaultResponse(chooseOneInstance(normalInstances));
        }
        //有灰度服務(wù),判斷是否需要灰度
        if (checkIfNeedGray(headers)) {
            log.info("gray service of {} will be called", this.serviceId);
            return new DefaultResponse(chooseOneInstance(grayInstances));
        }
        return new DefaultResponse(chooseOneInstance(normalInstances));
    }
    /**
     * 從實(shí)例列表中獲取其中一個(gè)實(shí)例的策略實(shí)現(xiàn),這里采用的是隨機(jī)挑選
     * pick strategy 可以根據(jù)業(yè)務(wù)需要,在這個(gè)方法里改寫(xiě)
     */
    private ServiceInstance chooseOneInstance(List<ServiceInstance> serviceInstances) {
        // strategy 1:可用的里面隨機(jī)選擇一個(gè)
        int size = serviceInstances.size();
        if (size == 1) {
            return serviceInstances.get(0);
        }
        Random rand = new Random();
        int random = rand.nextInt(size);
        return serviceInstances.get(random);
    }
    /**
     * 灰度判斷邏輯:
     * 1. 判斷請(qǐng)求header里是否用灰度標(biāo)識(shí)的 kv,有則走灰度服務(wù)
     * 2. 如果 1 不滿足,則判斷請(qǐng)求的用戶 id 是否在灰度用戶池中,有則走灰度服務(wù)
     * 3. 1 和 2 都不滿足,走正常服務(wù)
     */
    private boolean checkIfNeedGray(HttpHeaders headers) {
        String grayTag = headers.getFirst(BizConstant.GRAY_TAG);
        if (grayTag != null) {
            if (BizConstant.TRUE.equalsIgnoreCase(grayTag)) {
                // todo 可擴(kuò)展點(diǎn):目前是只判斷header里是否有BizConstant.GRAY_TAG的kv不為空且v="true",后面v可以改為版本號(hào)
                return true;
            }
        }
        String uid = headers.getFirst(BizConstant.UID);
        if (uid != null && customProperty.getGraySetting().getGrayUids().contains(uid)) {
            return true;
        }
        return false;
    }
    private Response<ServiceInstance> getServiceInstanceEmptyResponse() {
        log.warn("No servers available for service: " + this.serviceId);
        return new EmptyResponse();
    }
}
  • Https2HttpFilter:將進(jìn)入網(wǎng)關(guān)的 https 請(qǐng)求轉(zhuǎn)換為 http 請(qǐng)求
/**
 * https scheme to http
 */
@Component
@Slf4j
public class Https2HttpFilter implements GlobalFilter, Ordered {
    @Override
    public Mono<Void> filter(ServerWebExchange exchange, GatewayFilterChain chain) {
        ServerHttpRequest request = exchange.getRequest();
        URI originalUri = request.getURI();
        ServerHttpRequest.Builder mutate = request.mutate();
        String forwardUri = request.getURI().toString();
        if (forwardUri != null && forwardUri.startsWith(BizConstant.HTTPS)) {
            try {
                URI mutatedUri = new URI(BizConstant.HTTP,
                        originalUri.getUserInfo(),
                        originalUri.getHost(),
                        originalUri.getPort(),
                        originalUri.getPath(),
                        originalUri.getQuery(),
                        originalUri.getFragment());
                mutate.uri(mutatedUri);
            } catch (Exception e) {
                log.error(e.getMessage());
                throw new MMException("Https related error");
            }
        }
        ServerHttpRequest build = mutate.build();
        return chain.filter(exchange.mutate().request(build).build());
    }
    @Override
    public int getOrder() {
        return FILTER_ORDER_HTTPS_2_HTTP;
    }
}

NOTE

FILTER_ORDER_HTTPS_2_HTTP 是一個(gè) int 常量,需要滿足 LoadBalancerClientFilter 的執(zhí)行順序(10100) < FILTER_ORDER_HTTPS_2_HTTP < FILTER_ORDER_GRAY (10110)。這里可以假定 FILTER_ORDER_HTTPS_2_HTTP = 10105。之所以需要加一個(gè)Https2HttpFilter 過(guò)濾器,是因?yàn)槿绻?https 請(qǐng)求直接進(jìn)入到 GrayLoadBalancerClientFilter 會(huì)報(bào) NotSslRecordException 證書(shū)錯(cuò)誤。

2.2 | Nacos

Nacos 主要做一件事情:通過(guò) metadata 維護(hù)灰度服務(wù)。

從上圖可以看出,metadata 里 gray-tag=true 的實(shí)例即為灰度服務(wù)的實(shí)例。

通過(guò) webUI 的編輯按鈕可以實(shí)時(shí)的新增修改 metadata。

那么,如何在代碼側(cè)配置呢?

可以直接在bootstrap.yml添加以下字段:

spring:
  cloud:
    nacos:
      discovery:
        metadata:
          # 如果${gray}變量不存在,則gray-tag=false
          gray-tag: ${gray:false} 

2.3 | GitlabRunner

gitlab-runner 主要是 kube_deploy.yml 和 .gitlab-ci.yml 的一個(gè)聯(lián)動(dòng)配置

  • kube_deploy.yml添加以下環(huán)境變量:
apiVersion: apps/v1
kind: Deployment
metadata:
  name: ccc-deploy
  namespace: ccc
spec:
  template:
    spec:
      containers: 
      - env:
          - name: gray
            value: "gray-tag" # 這里的gray-tag值 將會(huì)在在.gitlab-ci.yml的腳本中被替換
  • .gitlab-ci.yml 灰度服務(wù)部署 gitlab-runner 腳本關(guān)鍵部分:
...
stages:
  - k8s-deploy
k8s-deploy-gray-service:
  stage: k8s-deploy
  script:
    - echo "=============== 開(kāi)始 k8s 部署任務(wù) ==============="
    - sed -i "s/gray-tag/true/g" kube_deploy.yml # 這
    - kubectl apply -f kube_deploy.yml
  only:
    - /^tag_gray_.*$/
k8s-deploy-normal-service:
  stage: k8s-deploy
  script:
    - echo "=============== 開(kāi)始 k8s 部署任務(wù) ==============="
    - sed -i "s/gray-tag/false/g" kube_deploy.yml # 這里替換 gray-tag 為 false
    - kubectl apply -f kube_deploy.yml
  only:
    - /^tag_normal_.*$/
 ...

此時(shí),當(dāng)打了一個(gè)以 tag_gray_ 開(kāi)頭的 tag 之后,kube_deploy.yml里的gray-tag就會(huì)被替換成 true,那么,nacos 的元數(shù)據(jù)上就會(huì)有一個(gè)gray-tag=true的標(biāo)簽,就會(huì)走灰度服務(wù)的發(fā)布流程。同理,以 tag_normal_ 開(kāi)頭的 tag,就會(huì)走正常服務(wù)的發(fā)布流程。

把這段腳本嵌入到 pipeline 之后,就可以通過(guò) tag 的方式,自動(dòng)化部署灰度/正常服務(wù)了。

3 | 后續(xù) TODO

目前實(shí)現(xiàn)的是后端服務(wù)的灰度發(fā)布,一個(gè)完整的灰度,還包含了前端應(yīng)用的灰度,后續(xù)會(huì)就前端的灰度發(fā)布再做一次整理。

4 | 使用版本說(shuō)明

實(shí)戰(zhàn)依賴版本

GroupSpring CloudSpring CloudSpring CloudSpring Cloud Alibaba NacosSpring Cloud Alibaba Nacos
ComponentHoxton.SR3GatewayLoadBalancerConfigDiscovery
Version-2.2.2.RELEASE2.2.2.RELEASE2.2.5.RELEASE2.2.5.RELEASE

需要注意的

在 Spring Cloud 全家桶中,最初的網(wǎng)關(guān)使用的是 Netflix 的 Zuul 1x 版本,但是由于其性能問(wèn)題,Spring Cloud 在苦等 Zuul 2x 版本未果的情況下,推出了自家的網(wǎng)關(guān)產(chǎn)品,取名叫 Spring Cloud Gateway (以下簡(jiǎn)稱 SCG),基于Webflux,通過(guò)底層封裝Netty,實(shí)現(xiàn)異步IO,大大地提示了性能。

Zuul 1x 版本

本質(zhì)上就是一個(gè)同步Servlet,采用多線程阻塞模型進(jìn)行請(qǐng)求轉(zhuǎn)發(fā)。簡(jiǎn)單講,每來(lái)一個(gè)請(qǐng)求,Servlet容器要為該請(qǐng)求分配一個(gè)線程專門(mén)負(fù)責(zé)處理這個(gè)請(qǐng)求,直到響應(yīng)返回客戶端這個(gè)線程才會(huì)被釋放返回容器線程池。如果后臺(tái)服務(wù)調(diào)用比較耗時(shí),那么這個(gè)線程就會(huì)被阻塞,阻塞期間線程資源被占用,不能干其它事情。我們知道Servlet容器線程池的大小是有限制的,當(dāng)前端請(qǐng)求量大,而后臺(tái)慢服務(wù)比較多時(shí),很容易耗盡容器線程池內(nèi)的線程,造成容器無(wú)法接受新的請(qǐng)求。且不支持任何長(zhǎng)連接,如websocket

NOTE 由于兩個(gè)網(wǎng)關(guān)的底層架構(gòu)不一致,負(fù)載均衡的邏輯也完全不一致,本文只探討 Spring Cloud Gateway 配合 Nacos 來(lái)實(shí)現(xiàn)灰度發(fā)布( Spring Cloud Zuul 網(wǎng)關(guān)的灰度發(fā)布不展開(kāi))。

至此,結(jié)合 SpringCloudGateway + Nacos + GitlabRunner 的全自動(dòng)灰度服務(wù)搭建和發(fā)布實(shí)戰(zhàn)全部完成。

以上就是SpringCloudGateway Nacos GitlabRunner的詳細(xì)內(nèi)容,更多關(guān)于SpringCloudGateway Nacos GitlabRunner的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!

相關(guān)文章

  • spring接口通過(guò)配置支持返回多種格式(xml,json,html,excel)

    spring接口通過(guò)配置支持返回多種格式(xml,json,html,excel)

    這篇文章主要給大家介紹了關(guān)于spring接口如何通過(guò)配置支持返回多種格式(xml,json,html,excel)的相關(guān)資料,文中通過(guò)示例代碼介紹的非常詳細(xì),需要的朋友可以參考借鑒,下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧。
    2017-12-12
  • Java8之lambda表達(dá)式基本語(yǔ)法

    Java8之lambda表達(dá)式基本語(yǔ)法

    本文通過(guò)示例大家給大家介紹了java8之lambda表達(dá)式的基本語(yǔ)法,感興趣的的朋友一起看看吧
    2017-08-08
  • spring mvc中的@PathVariable動(dòng)態(tài)參數(shù)詳解

    spring mvc中的@PathVariable動(dòng)態(tài)參數(shù)詳解

    這篇文章主要介紹了spring mvc中的@PathVariable動(dòng)態(tài)參數(shù)詳解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2021-11-11
  • SpringBoot?MDC全局鏈路最新完美解決方案

    SpringBoot?MDC全局鏈路最新完美解決方案

    MDC 在 Spring Boot 中的作用是為日志事件提供上下文信息,并將其與特定的請(qǐng)求、線程或操作關(guān)聯(lián)起來(lái),通過(guò)使用 MDC,可以更好地理解和分析日志,并在多線程環(huán)境中確保日志的準(zhǔn)確性和一致性,這篇文章主要介紹了SpringBoot?MDC全局鏈路解決方案,需要的朋友可以參考下
    2023-08-08
  • Java多線程處理千萬(wàn)級(jí)數(shù)據(jù)更新操作

    Java多線程處理千萬(wàn)級(jí)數(shù)據(jù)更新操作

    這篇文章主要為大家詳細(xì)介紹了Java如何通過(guò)多線程處理千萬(wàn)級(jí)數(shù)據(jù)更新操作,文中的示例代碼講解詳細(xì),感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下
    2024-11-11
  • Spring Boot項(xiàng)目中實(shí)現(xiàn)文件上傳功能的示例

    Spring Boot項(xiàng)目中實(shí)現(xiàn)文件上傳功能的示例

    這篇文章主要介紹了Spring Boot項(xiàng)目中實(shí)現(xiàn)文件上傳功能,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2020-12-12
  • Java對(duì)文件進(jìn)行基本操作案例講解

    Java對(duì)文件進(jìn)行基本操作案例講解

    這篇文章主要介紹了Java對(duì)文件進(jìn)行基本操作案例講解,本篇文章通過(guò)簡(jiǎn)要的案例,講解了該項(xiàng)技術(shù)的了解與使用,以下就是本文的詳細(xì)內(nèi)容,需要的朋友可以參考下
    2021-07-07
  • Java運(yùn)行環(huán)境搭建的圖文教程

    Java運(yùn)行環(huán)境搭建的圖文教程

    下面小編就為大家?guī)?lái)一篇Java運(yùn)行環(huán)境搭建的圖文教程。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2017-09-09
  • java字符串遍歷的幾種常用方法總結(jié)

    java字符串遍歷的幾種常用方法總結(jié)

    Java字符串是一系列的Unicode字符序列,但是它卻常常被誤認(rèn)為是char序列,這篇文章主要給大家介紹了關(guān)于java字符串遍歷的幾種常用方法,文中通過(guò)實(shí)例代碼介紹的非常詳細(xì),需要的朋友可以參考下
    2023-04-04
  • java 線程池的實(shí)現(xiàn)方法

    java 線程池的實(shí)現(xiàn)方法

    在本篇文章里小編給大家整理了關(guān)于java 線程池的實(shí)現(xiàn)方法,有興趣的朋友們可以學(xué)習(xí)參考下。
    2020-02-02

最新評(píng)論

祁阳县| 郸城县| 滨海县| 灵山县| 遵义县| 新邵县| 江北区| 漳浦县| 营口市| 榆社县| 乌恰县| 遵化市| 岐山县| 荥阳市| 怀来县| 娄底市| 绥化市| 彰化县| 新丰县| 科技| 武定县| 八宿县| 繁峙县| 纳雍县| 南京市| 南木林县| 伊宁市| 仙桃市| 乌恰县| 田阳县| 扎鲁特旗| 图木舒克市| 怀宁县| 武宣县| 楚雄市| 宽城| 齐齐哈尔市| 新野县| 奉节县| 仪陇县| 汉中市|