Calico IPIP路由分析

414 阅读1分钟

Calico IPIP模式是把内部IP报文作为载荷放到外部IP报文中。因此它只是载荷特殊的普通报文。运行在两个节点上的容器,只要宿主节点间是三层互通的,都能建立通信,不管在不在一个网段内。

image.png

IPIP模式通常被用于通过公网连接两个内部网络。相对来说,开销较小。但是只能传输IPv4单播流量,也就是说不能发送通过IPIP隧道发送多播报文。

IPIP模式的网络结构

  • 容器内
$ ip route
default via 169.254.1.1 dev eth0 
169.254.1.1 dev eth0 scope link 
$ ip neigh
169.254.1.1 dev eth0 lladdr ee:ee:ee:ee:ee:ee REACHABLE

查看容器内网卡信息:

$ ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
2: tunl0@NONE: <NOARP> mtu 1480 qdisc noop state DOWN group default qlen 1000
    link/ipip 0.0.0.0 brd 0.0.0.0
4: eth0@if162: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1480 qdisc noqueue state UP group default 
    link/ether 6a:c7:44:89:32:79 brd ff:ff:ff:ff:ff:ff link-netnsid 0
    inet 10.8.112.23/32 brd 10.8.112.23 scope global eth0
       valid_lft forever preferred_lft forever

tunl0网卡负责IPIP报文的封装

  • 主机内
$ ip addr
# cali14d77113501的mac地址是ee:ee:ee:ee:ee:ee
162: cali14d77113501@if4: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1480 qdisc noqueue state UP group default
    link/ether ee:ee:ee:ee:ee:ee brd ff:ff:ff:ff:ff:ff link-netnsid 3
    inet6 fe80::ecee:eeff:feee:eeee/64 scope link
       valid_lft forever preferred_lft forever

可见cali14d77113501@if4eth0@if162是一对veth pair. veth pair设备的功能就是从一端流入的包会从另一端流出。

  • 主机路由表
$ ip route
# 主机默认路由
default via 172.16.67.1 dev ens192 proto static metric 100

# 其他未分配ip会被直接忽略掉
blackhole 10.8.112.0/26 proto bird

# 目的地址为10.8.112.23,转发给cali14d77113501
10.8.112.23 dev cali14d77113501 scope link

# 每个节点负责的子网, 当跨节点通信时,通过tunl0设备
10.8.92.192/26 via 172.16.67.137 dev tunl0 proto bird onlink
10.8.140.0/26 via 172.16.67.140 dev tunl0 proto bird onlink
10.8.152.192/26 via 172.16.67.139 dev tunl0 proto bird onlink

# 主机路由
172.16.67.0/24 dev ens192 proto kernel scope link src 172.16.67.138 metric 100

route -n 的输出看着更清晰一点