Weave Net

Weave Net是一个多主机容器网络方案,支持去中心化的控制平面,各个host上的wRouter间通过建立Full Mesh的TCP链接,并通过Gossip来同步控制信息。这种方式省去了集中式的K/V Store,能够在一定程度上减低部署的复杂性,Weave将其称为“data centric”,而非RAFT或者Paxos的“algorithm centric”。

数据平面上,Weave通过UDP封装实现L2 Overlay,封装支持两种模式:

  • 运行在user space的sleeve mode:通过pcap设备在Linux bridge上截获数据包并由wRouter完成UDP封装,支持对L2 traffic进行加密,还支持Partial Connection,但是性能损失明显。
  • 运行在kernal space的 fastpath mode:即通过OVS的odp封装VxLAN并完成转发,wRouter不直接参与转发,而是通过下发odp 流表的方式控制转发,这种方式可以明显地提升吞吐量,但是不支持加密等高级功能。

Sleeve Mode:

Weave - 图1

Fastpath Mode:

Weave - 图2

关于Service的发布,weave做的也比较完整。首先,wRouter集成了DNS功能,能够动态地进行服务发现和负载均衡,另外,与libnetwork 的overlay driver类似,weave要求每个POD有两个网卡,一个就连在lb/ovs上处理L2 流量,另一个则连在docker0上处理Service流量,docker0后面仍然是iptables作NAT。

Weave - 图3

Weave已经集成了主流的容器系统

Weave Kubernetes

  1. kubectl apply -n kube-system -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

这会在所有Node上启动Weave插件以及Network policy controller:

  1. $ ps -ef | grep weave | grep -v grep
  2. root 25147 25131 0 16:22 ? 00:00:00 /bin/sh /home/weave/launch.sh
  3. root 25204 25147 0 16:22 ? 00:00:00 /home/weave/weaver --port=6783 --datapath=datapath --host-root=/host --http-addr=127.0.0.1:6784 --status-addr=0.0.0.0:6782 --docker-api= --no-dns --db-prefix=/weavedb/weave-net --ipalloc-range=10.32.0.0/12 --nickname=ubuntu-0 --ipalloc-init consensus=2 --conn-limit=30 --expect-npc 10.146.0.2 10.146.0.3
  4. root 25669 25654 0 16:22 ? 00:00:00 /usr/bin/weave-npc

这样,容器网络为

  • 所有容器都连接到weave网桥
  • weave网桥通过veth pair连到内核的openvswitch模块
  • 跨主机容器通过openvswitch vxlan通信
  • policy controller通过配置iptables规则为容器设置网络策略

Weave - 图4

Weave Scope

Weave Scope是一个容器监控和故障排查工具,可以方便的生成整个集群的拓扑并智能分组(Automatic Topologies and Intelligent Grouping)。

Weave Scope主要由scope-probe和scope-app组成

  1. +--Docker host----------+
  2. | +--Container------+ | .---------------.
  3. | | | | | Browser |
  4. | | +-----------+ | | |---------------|
  5. | | | scope-app |<---------| |
  6. | | +-----------+ | | | |
  7. | | ^ | | | |
  8. | | | | | '---------------'
  9. | | +-------------+ | |
  10. | | | scope-probe | | |
  11. | | +-------------+ | |
  12. | | | |
  13. | +-----------------+ |
  14. +-----------------------+

优点

  • 去中心化
  • 故障自动恢复
  • 加密通信
  • Multicast networking

缺点

  • UDP模式性能损失较大

参考文档