系统架构

OpenKruise 的整体架构如下:

alt

API

所有 OpenKruise 的功能都是通过 Kubernetes API 来提供, 比如:

  • 新的 CRD 定义,比如
  1. $ kubectl get crd | grep kruise.io
  2. advancedcronjobs.apps.kruise.io 2021-09-16T06:02:36Z
  3. broadcastjobs.apps.kruise.io 2021-09-16T06:02:36Z
  4. clonesets.apps.kruise.io 2021-09-16T06:02:36Z
  5. containerrecreaterequests.apps.kruise.io 2021-09-16T06:02:36Z
  6. daemonsets.apps.kruise.io 2021-09-16T06:02:36Z
  7. imagepulljobs.apps.kruise.io 2021-09-16T06:02:36Z
  8. nodeimages.apps.kruise.io 2021-09-16T06:02:36Z
  9. podunavailablebudgets.policy.kruise.io 2021-09-16T06:02:36Z
  10. resourcedistributions.apps.kruise.io 2021-09-16T06:02:36Z
  11. sidecarsets.apps.kruise.io 2021-09-16T06:02:36Z
  12. statefulsets.apps.kruise.io 2021-09-16T06:02:36Z
  13. uniteddeployments.apps.kruise.io 2021-09-16T06:02:37Z
  14. workloadspreads.apps.kruise.io 2021-09-16T06:02:37Z
  15. # ...
  • 资源对象中的特定标识(labels, annotations, envs 等),比如
  1. apiVersion: v1
  2. kind: Namespace
  3. metadata:
  4. labels:
  5. # 保护这个 namespace 下的 Pod 不被整个 ns 级联删除
  6. policy.kruise.io/delete-protection: Cascading

Manager

Kruise-manager 是一个运行 controller 和 webhook 中心组件,它通过 Deployment 部署在 kruise-system 命名空间中。

  1. $ kubectl get deploy -n kruise-system
  2. NAME READY UP-TO-DATE AVAILABLE AGE
  3. kruise-controller-manager 2/2 2 2 4h6m
  4. $ kubectl get pod -n kruise-system -l control-plane=controller-manager
  5. NAME READY STATUS RESTARTS AGE
  6. kruise-controller-manager-68dc6d87cc-k9vg8 1/1 Running 0 4h6m
  7. kruise-controller-manager-68dc6d87cc-w7x82 1/1 Running 0 4h6m

逻辑上来说,如 cloneset-controller/sidecarset-controller 这些的 controller 都是独立运行的。不过为了减少复杂度,它们都被打包在一个独立的二进制文件、并运行在 kruise-controller-manager-xxx 这个 Pod 中。

除了 controller 之外,kruise-controller-manager-xxx 中还包含了针对 Kruise CRD 以及 Pod 资源的 admission webhook。Kruise-manager 会创建一些 webhook configurations 来配置哪些资源需要感知处理、以及提供一个 Service 来给 kube-apiserver 调用。

  1. $ kubectl get svc -n kruise-system
  2. NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
  3. kruise-webhook-service ClusterIP 172.24.9.234 <none> 443/TCP 4h9m

上述的 kruise-webhook-service 非常重要,是提供给 kube-apiserver 调用的。

Daemon

这是从 Kruise v0.8.0 版本开始提供的一个新的 daemon 组件。

它通过 DaemonSet 部署到每个 Node 节点上,提供镜像预热、容器重启等功能。

  1. $ kubectl get pod -n kruise-system -l control-plane=daemon
  2. NAME READY STATUS RESTARTS AGE
  3. kruise-daemon-6hw6d 1/1 Running 0 4h7m
  4. kruise-daemon-d7xr4 1/1 Running 0 4h7m
  5. kruise-daemon-dqp8z 1/1 Running 0 4h7m
  6. kruise-daemon-dv96r 1/1 Running 0 4h7m
  7. kruise-daemon-q7594 1/1 Running 0 4h7m
  8. kruise-daemon-vnsbw 1/1 Running 0 4h7m