kubernetes中flannal、calico和cannal网络原理的实例分析

本篇文章为大家展示了kubernetes中flannal、calico和cannal网络原理的实例分析，内容简明扼要并且容易理解，绝对能使你眼前一亮，通过这篇文章的详细介绍希望你能有所收获。

一、flannel

原理：flannel有host-gw（非overlay网络），host-gw 模式是指直接使用指向目标机器物理ip的路由，不进行任何封装而进行数据包传输

（性能很高，但是如果节点太多，则每台机器的路由表会膨胀到一定境界，必须所有机器都互联，所有的节点必须都在同一个子网中，不能跨网段，二层必须能够互联）

overlay网络，支持UDP、VxLAN、AWS VPC和GCE路由等数据转发方式 （kubernetes默认使用了vxlan，下面以vxlan为例说明）

首先是ip地址的分配，通过在ip池中划分子网到指定物理机器实现。（flannel在分配ip的时候会挑选可用的子网到各自物理机器上去，而pod的ip从该子网中分配）

主机192.168.0.4上

ip link add dev flannel_vxlan_c type veth peer name flannel_vxlan_h

brctl addif cni flannel_vxlan_h
ip link set flannel_vxlan_h up
ip addr add 10.244.0.1/24 dev cni

ip netns add flannel_vxlan
ip netns exec flannel_vxlan ip link set lo up
ip link set flannel_vxlan_c netns flannel_vxlan
ip netns exec flannel_vxlan ip link set flannel_vxlan_c up
ip netns exec flannel_vxlan ip addr add 10.244.0.3/24 dev flannel_vxlan_c
ip netns exec flannel_vxlan ip route add default via 10.244.0.1

ip nei add 10.244.2.0 dev flannel.1 lladdr 22:3d:4d:c5:65:ff（这个mac地址是对面192.168.0.16上flannel.1的mac地址）
bridge fdb add 22:3d:4d:c5:65:ff dst 192.168.0.16 dev flannel.1
ip route add 10.244.2.0/24 via 10.244.2.0 dev flannel.1 onlink

这样，在另一边做同样的设置，就可以实现在vxlan的基础上的东西向互联了

需要注意的是图中的flanneld这里，我还不太确定他是做什么用的

优势：overlay网络，能适应公有云环境

缺点：udp性能损耗非常高，vxlan相对很好，不能进行网络隔离等等网络策略操作

二、calico网络

calico提供两种模式网络：BGP、ip-in-ip（overlay网络）

工作原理：

calico在每个节点上的内核中创建一个vrouter,这个vrouter做高效的路由转发，vrouter通过bgp向其他节点通报本地的pod相关的路由信息，在小规模部署中，所有的节点都可通过bgp互联，大规模的时候可以通过bgp reflector来完成路由的通报。

ip地址分配：分配策略同flannel类似，也是将整个pool划分为不同的子网，将子网调度到不同的节点上，然后各节点上使用相应的子网内的ip地址创建pod

calico可以使用iptables实现访问控制，可以实现很多网络策略

如图：

pod与物理机通过veth相连接。

felix用来设置路由以及iptables（可以实现网络策略，控制pod的通信情况）

bgp client（bird）通过读取路由信息，向整个网络中进行广播。这样对面就会获知娶一个特定网络的路由信息。

需要注意的是ip-in-ip 与 完全bgp的区别是，pod出来的数据包，通过ip route被发送给一个本地的ipip设备（这个设备做的工作就是使用本地物理机的ip和目的物理机器ip将pod的ip报文封装起来，根据路由发送到相应的机器上去）

具体实现大概是下面这样子的

主机192.168.0.4

ip netns add calico
ip link add dev calico-c type veth peer name calico-h
ip link set calico-c netns calico
ip netns exec calico ip link set lo up
ip netns exec calico ip link set calico-c up
ip netns exec calico ip addr add 10.244.0.3/24 dev calico-c
ip netns exec calico ip route add default via 169.254.1.1
ip netns exec calico ip route add 169.254.1.1 dev calico-c

ip route add 10.244.0.3 dev calico-h
ip link set calico-h up
sysctl -w net.ipv4.conf.calico-h.proxy_arp=1

BGP模式

ip route add 10.244.2.0/24 via 192.168.0.16

IP-IN-IP模式

ip tunnel add tunl0 mode ipip

ip route add 10.244.2.0/24 via 192.168.0.16 dev tunl0

在另一边是相反的。当然这些操作都是felix以及confd 和bird完成的

calico的性能：比flannel强太多，即便overlay网络ip-in-ip也比flannel的overlay网络性能强很多

优点：性能强、快、有网络策略、有overlay、基于三层路由的

缺点：据说是不能VRF，当然目前我还不知道什么是VRF

三、canal

canal是flannel与calico的结合版，在这里去除了calico的confd bird部分，也就意味着不使用bgp，不使用ipip隧道，保留的只有felix部分，这部分提供路由以及iptables的设置，也就是一般的网络策略。flannel在这里保留的是vxlan的隧道部分

canal创建的pod的网络结构就是这样的

其本质是：

主机192.168.0.4

ip link add dev canal-c type veth peer name canal-h
ip link set canal-c netns canal
ip netns exec canal ip link set lo up
ip netns exec canal ip link set canal-c up
ip netns exec canal ip addr add 10.244.0.3/24 dev canal-c
ip netns exec calico ip route add default via 169.254.1.1
ip netns exec canal ip route add 169.254.1.1 dev canal-c

ip route add 10.244.0.3 dev canal-h
ip link set canal-h up
sysctl -w net.ipv4.conf.canal-h.proxy_arp=1

ip nei add 10.5.47.0 dev flannel.1 lladdr 22:3d:4d:c5:65:ff （192.168.0.16上flannel.1的mac）
bridge fdb add 22:3d:4d:c5:65:ff dst 192.168.0.16 dev flannel.1
ip route add 10.244.1.0/24 via 10.244.1.0 dev flannel.1 onlink

主机192.168.0.16

ip link add dev canal-c type veth peer name canal-h
ip link set canal-c netns canal
ip netns exec canal ip link set lo up
ip netns exec canal ip link set canal-c up
ip netns exec canal ip addr add 10.244.1.3/24 dev canal-c
ip netns exec calico ip route add default via 169.254.1.1
ip netns exec canal ip route add 169.254.1.1 dev canal-c

ip route add 10.244.1.3 dev canal-h
ip link set canal-h up
sysctl -w net.ipv4.conf.canal-h.proxy_arp=1

ip nei add 10.244.0.0 dev flannel.1 lladdr 56:ad:b6:5f:16:d7 （192.168.0.4上flannel.1的mac）
bridge fdb add 56:ad:b6:5f:16:d7 dst 192.168.0.4 dev flannel.1
ip route add 10.244.0.0/24 via 10.244.1.0 dev flannel.1 onlink

优势：网络策略、overlay网络

缺点：性能下降的很快，但是貌似没有calico的不能vrf的缺点

上述内容就是kubernetes中flannal、calico和cannal网络原理的实例分析，你们学到知识或技能了吗？如果还想学到更多技能或者丰富自己的知识储备，欢迎关注行业资讯频道。