Gateway 连接

安装 Istio 多集群网格的介绍。这种情况下,Kubernetes 集群服务和每个集群中的应用都只能使用网关 IP 进行远程通信。

此配置中,每个集群都安装了一个完全相同的 Istio 控制平面,用于管理自己的网格,而不是使用一个中心 Istio。 出于策略应用和安全的考虑,每个集群都处于共享管理控制之下。

为了实现跨集群部署单一 Istio 服务网格,需要在所有集群中复制共享的服务和命名空间,并使用公共的根证书。跨集群通信发生在相应集群的 Istio Gateway 上。

Istio 网格使用 Istio Gateway 跨越多个 Kubernetes 集群访问远程 Pod

Istio 网格使用 Istio Gateway 跨越多个 Kubernetes 集群访问远程 Pod

先决条件

  • 两个或以上安装 1.10 或更新版本的 Kubernetes 集群。

  • 每个 Kubernetes 集群上都有使用 Helm 部署 Istio 控制平面的权限。

  • istio-ingressgateway 服务的 IP 地址必须能够从其它集群中进行访问。

  • 一个 Root CA。跨集群通信需要在服务之间使用双向 TLS 连接。为了启用跨集群的双向 TLS 通信,每个集群的 Citadel 都将被配置使用共享根证书所生成的中间 CA 凭证。出于演示目的,我们将使用 samples/certs 目录下的简单 root CA 证书,该证书作为 Istio 安装的一部分提供。

在每个集群中部署 Istio 控制平面

  • 从您的组织 root CA 生成每个集群 Citadel 使用的中间证书。使用共享的 root CA 启用跨越不同集群的双向 TLS 通信。

处于演示目的,下面的介绍中会在不同的集群中使用来自 Istio sample 目录中的同样的证书。在真实部署中,建议为不同集群使用不同的 CA,所有 CA 都从同样的根 CA 签发。

  • 使用 helm 生成多网关的 Istio 配置:

如果不清楚你的 helm 依赖是否过期,在开始之前可以使用 Helm 安装步骤中的命令进行更新。

Zip

  1. $ helm template install/kubernetes/helm/istio --name istio --namespace istio-system \
  2. -f @install/kubernetes/helm/istio/example-values/values-istio-multicluster-gateways.yaml@ > $HOME/istio.yaml

要了解更多细节以及参数定制方法,请阅读:用 Helm 进行安装

  • 每个集群中运行下面的命令,从而为所有集群生成一致的 Istio 控制面部署配置。

    • 使用如下命令,用新生成的 CA 证书,创建一个 Kubernetes Secret,阅读 CA 证书一节,其中有更多的相关细节。

ZipZipZipZip

  1. $ kubectl create namespace istio-system
  2. $ kubectl create secret generic cacerts -n istio-system \
  3. --from-file=@samples/certs/ca-cert.pem@ \
  4. --from-file=@samples/certs/ca-key.pem@ \
  5. --from-file=@samples/certs/root-cert.pem@ \
  6. --from-file=@samples/certs/cert-chain.pem@
  • 依照 Helm 安装步骤中的介绍完成 Istio 的安装。必须使用参数 —values install/kubernetes/helm/istio/example-values/values-istio-multicluster-gateways.yaml,来启用正确的多集群设置。例如:

Zip

  1. $ helm install istio --name istio --namespace istio-system --values @install/kubernetes/helm/istio/example-values/values-istio-multicluster-gateways.yaml@

配置 DNS

应用通常会使用 DNS 名称来获取 IP,然后进行访问,如果在远程集群中为服务提供 DNS 解析,就能让现存应用保持原样。Istio 在完成服务之间的请求路由的过程中,并不会使用 DNS。集群本地的服务会使用一个通用的 DNS 后缀(例如 svc.cluster.local)。Kubernetes DNS 为这些服务提供了 DNS 解析能力。

为了给远程集群提供一个类似的配置,我们给远端集群的服务用 <name>.<namespace>.global 的形式进行命名。Istio 提供了一个 CoreDNS 服务器,用来给这些服务提供 DNS 解析。为了使用这个 DNS 服务,需要对 Kubernetes 的 DNS 进行配置,要求使用这一 CoreDNS 服务器来为 .global DNS 域提供解析。

在每个需要调用远端服务的集群中,创建下列 ConfigMap 中的一个,如果已经存在,就进行更新。

使用 kube-dns 的集群:

  1. $ kubectl apply -f - <<EOF
  2. apiVersion: v1
  3. kind: ConfigMap
  4. metadata:
  5. name: kube-dns
  6. namespace: kube-system
  7. data:
  8. stubDomains: |
  9. {"global": ["$(kubectl get svc -n istio-system istiocoredns -o jsonpath={.spec.clusterIP})"]}
  10. EOF

使用 CoreDNS 的集群:

  1. $ kubectl apply -f - <<EOF
  2. apiVersion: v1
  3. kind: ConfigMap
  4. metadata:
  5. name: coredns
  6. namespace: kube-system
  7. data:
  8. Corefile: |
  9. .:53 {
  10. errors
  11. health
  12. kubernetes cluster.local in-addr.arpa ip6.arpa {
  13. pods insecure
  14. upstream
  15. fallthrough in-addr.arpa ip6.arpa
  16. }
  17. prometheus :9153
  18. proxy . /etc/resolv.conf
  19. cache 30
  20. loop
  21. reload
  22. loadbalance
  23. }
  24. global:53 {
  25. errors
  26. cache 30
  27. proxy . $(kubectl get svc -n istio-system istiocoredns -o jsonpath={.spec.clusterIP})
  28. }
  29. EOF

配置应用服务

如果一个集群中的服务需要访问远端集群中的服务,就需要创建一个 ServiceEntryServiceEntry 中的主机名应该是 <name>.<namespace>.global 的格式,其中的 namenamespace 需要根据服务名称和命名空间进行替换。

为了检查多集群配置是否生效,可以参考示例通过网关进行多集群连接来进行测试。

清理

每个集群上运行下面的命令,删除 Istio:

  1. $ kubectl delete -f $HOME/istio.yaml
  2. $ kubectl delete ns istio-system

总结

使用 Istio 网关,结合一个通用根证书以及 ServiceEntry,就能够让单一的 Istio 服务网格跨越多个 Kubernetes 集群。使用这种配置,无需对应用进行任何改动,流量就能够透明的路由到远端集群。虽然这种方式需要一部分的手工操作来配置远程的服务访问,但是 ServiceEntry 的创建过程也是可以自动化的。

相关内容

VPN 连接

通过直连远程 pods 实现多 Kubernetes 集群安装 Istio 网格。

Google Kubernetes Engine

基于 GKE 的 Istio 多集群安装。

IBM Cloud Private

多 IBM Cloud Private 集群安装 Istio 示例。

通过网关进行连接的多集群

在一个使用网关进行连接的多集群网格中配置远程服务。

集群感知的服务路由

利用 Istio 的水平分割 EDS 来创建多集群网格。

多集群服务网格中的分版本路由

在多集群服务网格环境中配置 Istio 的路由规则。