• udp - 默认
• vxlan
• host-gw
• aws
• gce
• alloc
• 容器网卡通过docker0桥接到flannel0网卡,而每个host对应的flannel0网段为 10.1.x.[1-255]/24,而flannel所组成的一个跨host的网段为10.1.x.x/16,而flannel0则为flanneld 进程虚拟出来的网卡。
• docker0的地址是由 /run/flannel/subnet.env 的 FLANNEL_SUBNET 参数决定的
HostA的Container(cache1)和HostB的Container(backend2)如何通信
1. host A的container1请求host B的container2的的数据时,流程如下: 根据host A的路由规则 "10.1.15.0 0.0.0.0 255.255.255.0 U 0 0 0 docker0“ 数据交给docker0处理。
2. docker0会收到数据,然后根据路由规则 ”10.1.0.0 0.0.0.0 255.255.0.0 U 0 0 0 flannel0" 数据被交由给flannel0网卡处理。 flanneld会把数据封包然后送给eth0,用udp协议发送到对方host的eth0网卡。
3. host B的 eth0网卡收到后,根据路由规则 10.1.0.0 0.0.0.0 255.255.0.0 U 0 0 0 flannel0" 则交给flannel0网卡处理。
4. flanneld会把数据解包,根据路由规则 “10.1.20.0 0.0.0.0 255.255.255.0 U 0 0 0 docker0" 交给docker0处理。
5. 则host B的container 2 将会收到数据。
至此网路通信解释完毕。
1. 安装依赖
# yum install bridge-utils
2. 配置Flannel(etcd服务器)
# etcdctl -C http://etcd:4001 set /coreos.com/network/config '{ "Network": "10.1.0.0/16" }'
3. 安装flannel(所有node服务器)
# curl -L https://github.com/coreos/flannel/releases/download/v0.6.1/flannel-v0.6.1-linux-amd64.tar.gz -o flannel-v0.6.1-linux-amd64.tar.gz # tar zxvf flannel-v0.6.1-linux-amd64.tar.gz # cd flannel-0.6.1 # cp flannel /usr/bin/
4. 启动Flanneld
# flanneld -etcd-endpoints=http://etcd:4001 -iface=enp0s8 >> /data/logs/flanneld.log 2>&1 &
参数说明
-iface=enp0s8 指定使用的网卡
5. 配置Docker的启动参数
# iptables -t nat -F # ifconfig docker0 down # brctl delbr docker0
6. 重启Docker
# source /run/flannel/subnet.env # docker daemon --exec-opt native.cgroupdriver=systemd -H unix:///var/run/docker.sock -H tcp://0.0.0.0:2375 --bip=${FLANNEL_SUBNET} --mtu=${FLANNEL_MTU} >> /data/logs/docker.log 2>&1 &
7. 验证
首先查看Flannel是否启动正确;Flannel启动后增加如下路由规则
# route -n
在node1,node2的机器上,各自启动一个docker,查看IP地址并通信
# docker run -t -i --name=peer centos
在node2的容器ping
跨主机容器之间网络已经能通了
8. 开机启动
执行从kubernetes的安装文件中脚本
kubernetes-1.3.5/cluster/centos/node/scripts
# sh docker.sh # sh flannel.sh
生成/usr/lib/systemd/system/docker.service和/opt/kubernetes/cfg/docker
生成/usr/lib/systemd/system/flannel.service和/opt/kubernetes/cfg/flannel
# cp –r kubernetes-1.3.5/cluster/centos/node/bin/* /opt/kubernetes/bin
注意,需要注释掉sh flannel.sh最下方的执行