大规模微服务场景下灰度发布与流量染色实践 https://mp.weixin.qq.com/s/UBoRKt3l91ffPagtjExmYw

【go-micro】微服务协作开发、灰度发布之流量染色 - HB-技术实践 http://hbchen.com/post/microservice/2019-11-30-go-micro-service-chain/

2019-11-30

约 1831 字  预计阅读 4 分钟

协作开发与灰度发布是微服务框架在流量治理能力方面的两个体现,本文结合go-micro实践对流量进行染色,实现开发环境的多分支协作, 以及生产环境的灰度发布。

  • QA组测试v1.2v2.0链路

    • v2.0 + v1.2链路
  • v1.1组仅关注v1.1的版本开发
    • v1.1 + master链路
  • v1.2组在v1.1开发新版srv-2服务
    • v1.2 + v1.1 + master链路
  • v2.0组仅关注v2.0的版本开发
    • v2.0 + master链路

生产环境灰度发布

流量染色

流量染色核心:

  • gateway对请求进行染色

    • 染色规则可以是hostheader字段、agent终端信息、用户筛选、流量比例等等
  • 染色信息在服务间传递
    • go-microhttp请求的header以及rpc请求的metadata
  • 服务调用时根据染色信息对服务进行筛选,实现调用链路的管控

我们基于go-micro实践的是实现多链路染色,染色链路带有优先级,如开发环境多服务、多分支协作v1.2组, 虽然v1.1v1.2都有srv-2服务,但我们在染色信息中v1.2在前优先选择,所以可以实现多分支同时染色(PS:如果两个分支中两个服务的优先级相反无法实现,需要设计更复杂的染色方案)

网关染色及client wrapper实现参考我实现的两个chain插件

染色

在网关对流量进行染色,基于mciro的插件,可以方便的实现,具体染色规则需要根据自身需求实现。

1
2
3
4
5
6
7
8
// 链路染色
api.Register(chain.New(chain.WithChainsFunc(func(r *http.Request) []string {
return []string{"v2.0", "v1.2"}
})))
 
web.Register(chain.New(chain.WithChainsFunc(func(r *http.Request) []string {
return []string{"v2.0"}
})))

调用链路管控

go-micro实现调用链路管控,最大的障碍就是网关,APIWeb均不支持服务筛选,需要自己二次开发,相关问题也反馈给社区看后续计划#1003

网易轻舟微服务9月重大更新:流量染色与gRPC服务托管-社区博客-网易数帆 https://sq.163yun.com/blog/article/331977098249682944

网易轻舟微服务9月重大更新:流量染色与gRPC服务托管

网易云社区2019-09-16 17:07

流量染色

特性简介

根据流量协议设置对应的流量染色规则,对指定的流量进行染色标记,并在整个调用链中携带该标记,以便于对染色流量进行跟踪和路由。

典型使用场景

• 全链路灰度发布 
新版本在正式发布前,可以使用流量染色控制先进行小规模验证,通过收集使用体验的数据,对应用新版本的功能、性能、稳定性等指标进行评判,然后再全量升级。即使某个新版本出现问题,也只会影响已染色流量,不会蔓延至整个系统,从而保证业务的正常运行。 
• 多测试环境管理 
当用户需要在一个测试环境中管理多个测试分支时,可以通过流量染色标记不同的测试分支流量,将该流量路由至测试版本,从而提供整体测试环境的复用性的同时,避免了不同测试分支的互相干扰。

产品优势

• 支持多种协议类型:包括 HTTP、RPC 等; 
• 流量入口:支持以 NSF 服务或 API 网关为流量入口; 
• 支持 MQ 等中间件流量染色; 
• 支持流量穿梭:对于染色链路中未指定的服务,仍允许再请求中携带染色标记并在下一跳路由回染色链路。 
• 支持多个流量染色配置:允许对一套微服务系统的不同流量进行染色,甚至允许同一个微服务同时参与多个流量染色。

gRPC 服务托管

特性简介

将 gPRC服务托管到 NSF微服务框架,用户只需要关注 gRPC服务自身的逻辑,无需再关注注册中心、配置中心和元数据中心的搭建和维护。托管后还可以使用 NSF提供的限流降级、拓扑关系、路由、及监控等能力,而且整个托管过程是无侵入的,不会增加用户的理解成本和开发成本。

gRPC 治理能力

• 支持 gRPC服务的注册与发现; 
• 查看 gRPC 服务实例列表; 
• 查看 gRPC 服务监控; 
• 支持动态配置; 
• 查看 gRPC 服务依赖关系和服务拓扑; 
• 支持 gPRC 服务的限流、降级、容错等治理能力; 
• 支持 gRPC 服务的路由管理; 
• 支持 gRPC 服务的流量染色; 
• 通过知识库管理 gRPC 服务元数据;

gRPC 服务托管方式

以 Java 应用为例,基于无侵入的设计方式,将 gPRC 服务托管到 NSF 只需要以下操作: 
1、从 NSF 控制的开发工具页面下载 NSF Agent; 
2、在开发工具页面,按照指引生成 Agent 配置文件;其中,服务类型选择 gPRC;将配置文件放入工程下的配置文件夹中; 
3、启动 gRPC 服务,在启动命令中,通过-jar引入 NSF Agent 的 JAR文件; 
4、登录轻舟 NSF 控制台,查看服务注册结果。 

 
 

流量染色与gRPC服务托管 微服务协作开发、灰度发布之流量染色 灰度发布与流量染色的更多相关文章

  1. grpc应用于微服务的分析,基于python

    grpc应用于微服务的分析 gRPC 是一个高性能.开源和通用的 RPC 框架,面向移动和 HTTP/2 设计,目前提供 C.Java 和 Go 语言版本,分别是:grpc, grpc-java, g ...

  2. [转]系统架构演变--集中式架构-垂直拆分-分布式服务-SOA(服务治理)-微服务

    一.系统架构演变 1.1. 集中式架构 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本.此时,用于简化增删改查工作量的数据访问框架(ORM)是影响项目开发的关键. 存在的 ...

  3. SpringCloud学习笔记(二):微服务概述、微服务和微服务架构、微服务优缺点、微服务技术栈有哪些、SpringCloud是什么

    从技术维度理解: 微服务化的核心就是将传统的一站式应用,根据业务拆分成一个一个的服务,彻底 地去耦合,每一个微服务提供单个业务功能的服务,一个服务做一件事, 从技术角度看就是一种小而独立的处理过程,类 ...

  4. Chris Richardson微服务翻译:重构单体服务为微服务

    Chris Richardson 微服务系列翻译全7篇链接: 微服务介绍 构建微服务之使用API网关 构建微服务之微服务架构的进程通讯 微服务架构中的服务发现 微服务之事件驱动的数据管理 微服务部署 ...

  5. Chris Richardson微服务翻译:构建微服务之微服务架构的进程通讯

    Chris Richardson 微服务系列翻译全7篇链接: 微服务介绍 构建微服务之使用API网关 构建微服务之微服务架构的进程通讯(本文) 微服务架构中的服务发现 微服务之事件驱动的数据管理 微服 ...

  6. CODING DevOps 系列第五课:微服务测试——微服务下展开体系化的微服务测试

    微服务测试的痛点与挑战 这张图可以形象地展示单体服务和微服务的对比,单体应用就像左边巨大的集装箱,软件模块和应用都包括其中:而微服务就像是由一个小集装箱组成,微小的服务组成一个庞大.完整的系统.单体服 ...

  7. 腾讯高性能RPC开发框架Tars实现服务治理(微服务)

    Github:https://github.com/Tencent/Tars 1. 介绍 Tars是基于名字服务使用Tars协议的高性能RPC开发框架,同时配套一体化的服务治理平台,帮助个人或者企业快 ...

  8. Spring Cloud微服务安全实战_4-3_订单微服务&价格微服务

    实现一个场景: 订单微服务: POM: <?xml version="1.0" encoding="UTF-8"?> <project xml ...

  9. SpringCloud与微服务Ⅳ --- Rest微服务构建案例工程模块

    一.父工程搭建 父工程pom: <?xml version="1.0" encoding="UTF-8"?> <project xmlns=& ...

随机推荐

  1. Git 使用中遇见的各种问题及解决办法

    一.修改提交代码的用户名以及提交邮箱,(推荐使用方法2,一劳永逸) 方法1(修改.git/config文件): step1:进入工程.git文件夹 step2:vim config step3:末行添 ...

  2. Tiny6410烧入uboot,linux内核,文件系统

    好久没有玩tiny6410了,今天拿出来试试.之前学习一直是跟着视频学习的.今天自己动手来做一下. 首先我将光盘linux目录下的linux-2.6.38-20150708.tgz  rootfs_r ...

  3. SpringBoot 获取微信小程序openid

    最近做一个项目用到小程序,为了简化用户啊登录,通过获取小程序用户的openid来唯一标示用户. 1.官方教程 2.具体步骤 3.具体实现 4.可能出现的错误 5.代码下载 1.官方教程 先来看看官方怎 ...

  4. .NET 5 开源工作流框架elsa技术研究

    今天假期第一天,研究了.NET 5开源工作流框架elsa,现在分享给大家. 一.框架简介 elsa是一个开源的.NET Standard 工作流框架,官方网站:https://elsa-workflo ...

  5. JAVA顺序结构和选择结构

    顺序结构 JAVA的基本结构就是顺序结构,除非特别指明,否则按顺序一句一句执行 顺序结构是最简单的算法结构 语句和语句直接,框与框直接就是按从上到下的顺序执行的,它是由若干个依次执行的处理步骤组成的, ...

  6. 聊一聊这个总下载量3603w的xss库,是如何工作的?

    上篇文章这一次,彻底理解XSS攻击讲解了XSS攻击的类型和预防方式,本篇文章我们来看这个36039K的XSS-NPM库(你没有看错就是3603W次, 36039K次,36,039,651次,数据来自h ...

  7. Salesforce 大数据量处理篇(一)Skinny Table

    本篇参考:https://developer.salesforce.com/docs/atlas.en-us.salesforce_large_data_volumes_bp.meta/salesfo ...

  8. Logstash学习之路(五)使用Logstash抽取mysql数据到kakfa

    一.Logstash对接kafka测通 说明: 由于我这里kafka是伪分布式,且kafka在伪分布式下,已经集成了zookeeper. 1.先将zk启动,如果是在伪分布式下,kafka已经集成了zk ...

  9. JavaScript正则表达式详解

    在JavaScript中,正则表达式由RegExp对象表示.RegExp对象呢,又可以通过直接量和构造函数RegExp两种方式创建,分别如下: //直接量 var re = /pattern/[g | ...

  10. ThinkPHP的url简化

    TP的url请求简化 下面是apache的配置过程,可以参考: 1.       httpd.conf 配置文件中加载了mod_rewrite.so模块 2.       AllowOverride ...