Clusternet v0.5.0 重磅发布: 全面解决多集群应用分发的差异化配置难题

此账号已注销
• 阅读 638

作者

徐迪,腾讯云容器技术专家。 汝英哲,腾讯云高级产品经理。

摘要

在做多集群应用分发的时候,经常会遇到以下的差异化问题,比如:

  1. 在分发的资源上全部打上统一的标签,比如 apps.my.company/deployed-by: my-platform
  2. 在分发到子集群的资源上标记集群的信息,比如 apps.my.company/running-in: cluster-01
  3. 调整应用在每个集群中的副本数目、镜像名称等等,比如有一个名为 my-nginx (声明的副本数为 3)的 Deployment 应用要分发到集群 cluster-01,集群 cluster-02,集群 cluster-03 中,我希望在这三个集群的副本数目分别为 3,5,7;
  4. 在分发到集群 cluster-01 之前,调整应用在该集群中的一些配置,比如注入一个 Sidecar 容器等;
  5. 遇到某些特殊场景时,例如大促,动态扩容,应用灰度升级时,希望可以针对某个集群进行操作,变更范围小,不影响到其他集群,同时出现问题的时候,可以及时回滚,恢复到变更前的状态;
  6. 如果定义了多个差异化配置,相互之间出现冲突时,该如何解决;

开源 Clusternet 项目简介

Clusternet ( Cluster Internet ) 是腾讯云开源的兼具多集群管理和跨集群应用编排的云原生管控项目,让使用多集群就像上网一样简单。无论你的 Kubernetes 集群是运行在公有云、私有云、混合云还是边缘云上,都拥有一致的管理/访问体验,利用 K8s API 集中部署和协调多集群的应用程序和服务。

Clusternet 采用 Addon 插件的方式,方便用户一键安装、运维及集成,轻松地管理数以百万计的 Kubernetes 集群,让云计算像 Internet 一样无所不在,自由便捷。

Clusternet 支持向不同集群分发和管理各种应用资源,包括原生 Kubernetes 各类资源(Deployment/StatefulSet/ConfigMap/Secret 等)、各类 CRD 资源,以及 HelmChart 应用等等。

Clusternet 如何解决这些差异化配置难题

Clusternet 在设计应用分发模型的时候,就充分考虑到了上述的那些场景,不希望引入过多的复杂设计,尽量减少用户的重复定义,做到精简化、方便配置、可扩展性强、便于变更回滚等等。

如果我们将上述的差异化问题进行归纳,大致可以归纳为以下两类:

  1. 通用化配置或者全局化配置,比如对于某些资源进行无差异化的打标签,预配置等等;

  2. 专属于某个集群的配置,比如更改 Deployment 在某集群对应的副本数,升级镜像,增加 Sidecar 容器等等;

下图是 Clusternet 的多集群应用分发模型,其中绿色的模块是需要用户去创建的,紫色的模块是 Clusternet 内部做流转的资源对象。Clusternet 提供了 kubectl 插件,可以通过 “kubectl clusternet apply” 命令来创建资源。欢迎阅读 Clusternet - 新一代开源多集群管理与应用治理项目,了解图中的相关概念。

Clusternet v0.5.0 重磅发布: 全面解决多集群应用分发的差异化配置难题

Clusternet 资源分发模型采用松耦合的设计,用户无须更改或重新编写已有的资源对象,仅需要额外定义分发策略 (Subscription)和差异化配置(Localization/Globalization)即可实现多集群的应用分发。

Localization 与 Globalization

在 Clusternet 中,每个注册的集群,都会拥有一个专属的 namespace (命名空间),因此我们分别定义了 LocalizationGlobalization 这两个 CRD 用于声明差异化配置。其中 Localization 描述 namespace-scoped (命名空间作用域)的差异化配置策略,可用于对单个集群进行配置,比如 Deployment 在这个集群中的副本数目等。而 Globalization 描述 cluster-scoped (集群作用域) 的差异化配置策略,比如修改某个 HelmChart 的通用配置等。

Override 策略

Clusternet 还提供了两种 Overide 策略:ApplyLater(默认的策略)和 ApplyNowApplyLater 意味着该 Localization/Globalization 的差异化配置不会立即应用到资源上,只会在随后新创建出来的 Description 对象或者 HelmChart/Subscription/Description 等各个资源对象更新的时候才生效。而 ApplyNow 意味着会创建后即时生效,Clusternet 会将定义的差异化配置应用到所有匹配的对象中,即时下发到对应的子集群中。

Priority 优先级

此外,两者均支持按照 Priority(优先级)进行管理和配置,优先级的高低通过 0-1000 的数值来定义,值越小,优先级越低,默认是500。在进行差异化渲染的时候,Clusternet 会按照 Globalization (低优先级) -> Globalization (高优先级) -> Localization (低优先级) -> Localization (高优先级) 的次序,依次将声明的 Override 进行 apply。

正是借助于这种两阶段基于优先级two-stage priority based)的差异化配置能力,Clusternet 可以很方便地支持面向多集群的蓝绿发布、金丝雀发布、版本升级等场景。在使用过程中, 你可以定义多个 GlobalizationLocalization 对象,并设置不同的优先级策略。

支持 Patch 操作

Clusternet 支持两种格式的 Override,JSON Patch (RFC 6902) 和 JSON Merge Patch (RFC 7396)。有关 JSON patch 和 JSON 合并 patch 的比较,大家可以查看 JSON Patch 和 JSON Merge Patch,也可以参照如下的典型示例。

典型示例

下面我们来看几个典型的差异化配置场景。在如下的例子中,我们通过 Localization 对象来统一展示。这里使用 Globalization 也是可以的,这两者的 Spec 定义都是一样的,唯一的区别这两者的作用域和优先级差别。大家在实际使用的时候,可以根据需要进行改写。

增加/更新标签

如果我们想给某个对象增加或者更新标签,可以这么定义如下的 Localization 对象。在使用的时候,请将 metadata.namespace 的值替换为真实的注册集群的专属 namespace。

apiVersion: apps.clusternet.io/v1alpha1
kind: Localization
metadata:
  name: nginx-local-overrides-demo-label
  namespace: clusternet-5l82l # 请更新这个值为对应集群的 namespace
spec:
  overridePolicy: ApplyLater
  # 优先级反映着该对象的重要性,数值范围从 0 到 1000,值越小表示优先级越低
  # 默认的值为 500.
  priority: 300
  feed: # 这里表示要 override 的对象
    apiVersion: apps/v1
    kind: Deployment
    name: my-nginx
    namespace: foo
  overrides: # 这里可以定义着多个 override
    - name: add-update-labels
      type: MergePatch # 这里需要指定 override 的类型
      # value 可以是 yaml 格式,也可以是 json 格式。
      # 如下是 json 格式的例子
      value: '{"metadata":{"labels":{"deployed-in-cluster":"clusternet-5l82l"}}}'

可以在一个 Localization 对象中定义多个 overrides,在上面的例子中,我们只定义了一个名为 add-update-labels 的 override,其值为 json 格式的字符串,目的是增加或者更新一个标签 deployed-in-cluster: clusternet-5l82lspec.feed 所定义的对象中。

这里 override 的值也可以 yaml 格式,见如下的例子。

apiVersion: apps.clusternet.io/v1alpha1
kind: Localization
metadata:
  name: nginx-local-overrides-demo-label
  namespace: clusternet-5l82l # 请更新这个值为对应集群的 namespace
spec:
  overridePolicy: ApplyLater
  # 优先级反映着该对象的重要性,数值范围从 0 到 1000,值越小表示优先级越低
  # 默认的值为 500.
  priority: 300
  feed: # 这里表示要 override 的对象
    apiVersion: apps/v1
    kind: Deployment
    name: my-nginx
    namespace: foo
  overrides: # 这里定义着 override value
    - name: add-update-labels
      type: MergePatch
      # value 可以是 yaml 格式,也可以是 json 格式。
      # 如下是 yaml 格式的例子
      value: |-
        metadata:
          labels:
            deployed-in-cluster: clusternet-5l82l

替换镜像及副本数目

Override 的类型也可以指定为 JSONPatch。在实际使用的时候,可以根据需要选择一个合适的 override 类型即可。

通过如下的例子,可以将 Deployment foo/my-nginxclusternet-5l82l 子集群中的副本数更改为 3,替换容器的镜像为 nginx:1.14.0-alpine,并增加一个新的注释 foo: bar

apiVersion: apps.clusternet.io/v1alpha1
kind: Localization
metadata:
  name: nginx-local-overrides-demo-image-replicas
  namespace: clusternet-5l82l # 请更新这个值为对应集群的 namespace
spec:
  overridePolicy: ApplyLater
  # 优先级反映着该对象的重要性,数值范围从 0 到 1000,值越小表示优先级越低
  # 默认的值为 500.
  priority: 400
  feed: # 这里表示要 override 的对象
    apiVersion: apps/v1
    kind: Deployment
    name: my-nginx
    namespace: foo
  overrides: # 这里定义着 override value
    - name: scale-and-add-annotations
      type: JSONPatch
      # value 可以是 yaml 格式,也可以是 json 格式。
      value: |-
        - path: /spec/replicas
          value: 3
          op: replace
        - path: "/spec/template/spec/containers/0/image"
          value: "nginx:1.14.0-alpine"
          op: replace
        - path: /metadata/annotations
          value:
            foo: bar
          op: add

注入 Sidecar 容器

我们还可以通过 Localization 来为 Deployment foo/my-nginxclusternet-5l82l 子集群下的实例注入 Sidecar 容器,见如下的示例,

apiVersion: apps.clusternet.io/v1alpha1
kind: Localization
metadata:
  name: nginx-local-overrides-demo-sidecar
  namespace: clusternet-5l82l # 请更新这个值为对应集群的 namespace
spec:
  overridePolicy: ApplyLater
  # 优先级反映着该对象的重要性,数值范围从 0 到 1000,值越小表示优先级越低
  # 默认的值为 500.
  priority: 600
  feed: # 这里表示要 override 的对象
    apiVersion: apps/v1
    kind: Deployment
    name: my-nginx
    namespace: foo
  overrides: # 这里定义着 override value
    - name: inject-new-container
      type: JSONPatch
      # value 可以是 yaml 格式,也可以是 json 格式。
      value: |-
        - op: add
          path: "/spec/template/spec/containers/1"
          value:
            name: "redis-container"
            image: "redis:6.2.5"

通过 LocalizationGlobalization 不仅仅可以做如上的差异化配置,还有更多的场景等待着大家去发掘。

为了方便大家上手体验一番,Clusternet 提供了例子,大家可以参照 README 中的步骤来实践一下多集群的应用分发。

加入我们

Clusternet 项目开源进行时,请关注 https://github.com/clusternet/clusternet 点赞支持,欢迎加入我们一起贡献更多的功能。

相关链接

[1] https://github.com/clusternet/clusternet

[2] https://github.com/clusternet/kubectl-clusternet

[3] https://krew.sigs.k8s.io/plugins/

关于我们

更多关于云原生的案例和知识,可关注同名【腾讯云原生】公众号~

福利:

①公众号后台回复【手册】,可获得《腾讯云原生路线图手册》&《腾讯云原生最佳实践》~

②公众号后台回复【系列】,可获得《15个系列100+篇超实用云原生原创干货合集》,包含Kubernetes 降本增效、K8s 性能优化实践、最佳实践等系列。
点赞
收藏
评论区
推荐文章
blmius blmius
2年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Jacquelyn38 Jacquelyn38
2年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Stella981 Stella981
2年前
KVM调整cpu和内存
一.修改kvm虚拟机的配置1、virsheditcentos7找到“memory”和“vcpu”标签,将<namecentos7</name<uuid2220a6d1a36a4fbb8523e078b3dfe795</uuid
Wesley13 Wesley13
2年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
2年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
2年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
2年前
MongoDB 分片管理(一)检查集群状态
一、检查集群状态1.1使用sh.status()查看集群摘要信息1、使用sh.status()可以查看分片信息、数据库信息、集合信息sh.status()如果数据块较多时,使用sh.status(true)又是输出会很多,就不会截断,要使用如下查看2、tooman
Wesley13 Wesley13
2年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
3个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这