当前位置： 首页 > news >正文

网站建设活动定制网站制作公司

news 2025/7/20 20:58:16
网站建设活动,定制网站制作公司,我不想找之前做网站的续费,wordpress 中文api公众号关注 「奇妙的 Linux 世界」设为「星标」，每天带你玩转 Linux ！Flannel 介绍Flannel 是一个非常简单的 overlay 网络（VXLAN），是 Kubernetes 网络 CNI 的解决方案之一。Flannel 在每台主机上运行一个简单的轻量级…

公众号关注 「奇妙的 Linux 世界」

设为「星标」，每天带你玩转 Linux ！

8d8fdf8ef8d3324c5f708ca4b9562430.jpeg

Flannel 介绍

Flannel 是一个非常简单的 overlay 网络（VXLAN），是 Kubernetes 网络 CNI 的解决方案之一。Flannel 在每台主机上运行一个简单的轻量级 agent flanneld 来监听集群中节点的变更，并对地址空间进行预配置。Flannel 还会在每台主机上安装 vtep flannel.1（VXLAN tunnel endpoints），与其他主机通过 VXLAN 隧道相连。

flanneld 监听在 8472 端口，通过 UDP 与其他节点的 vtep 进行数据传输。到达 vtep 的二层包会被原封不动地通过 UDP 的方式发送到对端的 vtep，然后拆出二层包进行处理。简单说就是用四层的 UDP 传输二层的数据帧。

4f9599544d4dd064ed74833f330b831a.jpeg
vxlan-tunnel

在 Kubernetes 发行版 K3S[1] 中将 Flannel 作为默认的 CNI 实现。K3S 集成了 flannel，在启动后 flannel 以 go routine 的方式运行。

环境搭建

Kubernetes 集群使用 k3s 发行版，但在安装集群的时候，禁用 k3s 集成的 flannel，使用独立安装的 flannel 进行验证。

安装 CNI 的 plugin，需要在所有的 node 节点上执行下面的命令，下载 CNI 的官方 bin。

sudo mkdir -p /opt/cni/bin
curl -sSL https://github.com/containernetworking/plugins/releases/download/v1.1.1/cni-plugins-linux-amd64-v1.1.1.tgz | sudo tar -zxf - -C /opt/cni/bin

安装 k3s 的控制平面。

export INSTALL_K3S_VERSION=v1.23.8+k3s2
curl -sfL https://get.k3s.io | sh -s - --disable traefik --flannel-backend=none --write-kubeconfig-mode 644 --write-kubeconfig ~/.kube/config

安装 Flannel。这里注意，Flannel 默认的 Pod CIRD 是 10.244.0.0/16，我们将其修改为 k3s 默认的 10.42.0.0/16。

curl -s https://raw.githubusercontent.com/flannel-io/flannel/master/Documentation/kube-flannel.yml | sed 's|10.244.0.0/16|10.42.0.0/16|g' | kubectl apply -f -

添加另一个节点到集群。

export INSTALL_K3S_VERSION=v1.23.8+k3s2
export MASTER_IP=<MASTER_IP>
export NODE_TOKEN=<TOKEN>
curl -sfL https://get.k3s.io | K3S_URL=https://${MASTER_IP}:6443 K3S_TOKEN=${NODE_TOKEN} sh -

查看节点状态。

kubectl get node
NAME          STATUS   ROLES                  AGE   VERSION
ubuntu-dev3   Ready    <none>                 13m   v1.23.8+k3s2
ubuntu-dev2   Ready    control-plane,master   17m   v1.23.8+k3s2

运行两个 pod：curl 和 httpbin，为了探寻

NODE1=ubuntu-dev2
NODE2=ubuntu-dev3
kubectl apply -n default -f - <<EOF
apiVersion: v1
kind: Pod
metadata:labels:app: curlname: curl
spec:containers:- image: curlimages/curlname: curlcommand: ["sleep", "365d"]nodeName: $NODE1
---
apiVersion: v1
kind: Pod
metadata:labels:app: httpbinname: httpbin
spec:containers:- image: kennethreitz/httpbinname: httpbinnodeName: $NODE2
EOF

网络配置

接下来，一起看下 CNI 插件如何配置 pod 网络。

初始化

Flannel 是通过 Daemonset 的方式部署的，每台节点上都会运行一个 flannel 的 pod。通过挂载本地磁盘的方式，在 Pod 启动时会通过初始化容器将二进制文件和 CNI 的配置复制到本地磁盘中，分别位于 /opt/cni/bin/flannel 和 /etc/cni/net.d/10-flannel.conflist。

通过查看 kube-flannel.yml[2] 中的 ConfigMap，可以找到 CNI 配置，flannel 默认委托（见 flannel-cni 源码 `flannel_linux.go#L78`[3]）给 bridge 插件[4] 进行网络配置，网络名称为 cbr0；IP 地址的管理，默认委托（见 flannel-cni 源码 `flannel_linux.go#L40`[5]） host-local 插件[6] 完成。

#cni-conf.json 复制到 /etc/cni/net.d/10-flannel.conflist
{"name": "cbr0","cniVersion": "0.3.1","plugins": [{"type": "flannel","delegate": {"hairpinMode": true,"isDefaultGateway": true}},{"type": "portmap","capabilities": {"portMappings": true}}]
}

还有 Flannel 的网络配置，配置中有我们设置的 Pod CIDR 10.42.0.0/16 以及后端（backend）的类型 vxlan。这也是 flannel 默认的类型，此外还有 多种后端类型[7] 可选，如 host-gw、wireguard、udp、Alloc、IPIP、IPSec。

#net-conf.json 挂载到 pod 的 /etc/kube-flannel/net-conf.json
{"Network": "10.42.0.0/16","Backend": {"Type": "vxlan"}
}

Flannel Pod 运行启动 flanneld 进程，指定了参数 --ip-masq 和 --kube-subnet-mgr，后者开启了 kube subnet manager 模式。

运行

7a48b8d863b93ab4efd20ce8159a4070.png

集群初始化时使用了默认的 Pod CIDR 10.42.0.0/16，当有节点加入集群，集群会从该网段上为节点分配 属于节点的 Pod CIDR 10.42.X.1/24。

flannel 在 kube subnet manager 模式下，连接到 apiserver 监听节点更新的事件，从节点信息中获取节点的 Pod CIDR。

kubectl get no ubuntu-dev2 -o jsonpath={.spec} | jq
{"podCIDR": "10.42.0.0/24","podCIDRs": ["10.42.0.0/24"],"providerID": "k3s://ubuntu-dev2"
}

然后在主机上写子网配置文件，下面展示的是其中一个节点的子网配置文件的内容。另一个节点的内容差异在 FLANNEL_SUBNET=10.42.1.1/24，使用的是对应节点的 Pod CIDR。

#node 192.168.1.12
cat /run/flannel/subnet.env
FLANNEL_NETWORK=10.42.0.0/16
FLANNEL_SUBNET=10.42.0.1/24
FLANNEL_MTU=1450
FLANNEL_IPMASQ=true

CNI 插件执行

CNI 插件的执行是由容器运行时触发的，具体细节可以看上一篇 《源码解析：从 kubelet、容器运行时看 CNI 的使用》。

ca3ca2d6d85fbd5ffca5096923b841f7.png
Flannel Plugin Flow

flannel 插件

flannel CNI 插件（/opt/cni/bin/flannel）执行的时候，接收传入的 cni-conf.json，读取上面初始化好的 subnet.env 的配置，输出结果，委托给 bridge 进行下一步。

cat /var/lib/cni/flannel/e4239ab2706ed9191543a5c7f1ef06fc1f0a56346b0c3f2c742d52607ea271f0 | jq
{"cniVersion": "0.3.1","hairpinMode": true,"ipMasq": false,"ipam": {"ranges": [[{"subnet": "10.42.0.0/24"}]],"routes": [{"dst": "10.42.0.0/16"}],"type": "host-local"},"isDefaultGateway": true,"isGateway": true,"mtu": 1450,"name": "cbr0","type": "bridge"
}

bridge 插件

bridge 使用上面的输出连同参数一起作为输入，根据配置完成如下操作：

  1. 创建网桥 cni0（节点的根网络命名空间）

  2. 创建容器网络接口 eth0（ pod 网络命名空间）

  3. 创建主机上的虚拟网络接口 vethX（节点的根网络命名空间）

  4. 将 vethX 连接到网桥 cni0

  5. 委托 ipam 插件分配 IP 地址、DNS、路由

  6. 将 IP 地址绑定到 pod 网络命名空间的接口 eth0 上

  7. 检查网桥状态

  8. 设置路由

  9. 设置 DNS

最后输出如下的结果：

cat /var/li/cni/results/cbr0-a34bb3dc268e99e6e1ef83c732f5619ca89924b646766d1ef352de90dbd1c750-eth0 | jq .result
{"cniVersion": "0.3.1","dns": {},"interfaces": [{"mac": "6a:0f:94:28:9b:e7","name": "cni0"},{"mac": "ca:b4:a9:83:0f:d4","name": "veth38b50fb4"},{"mac": "0a:01:c5:6f:57:67","name": "eth0","sandbox": "/var/run/netns/cni-44bb41bd-7c41-4860-3c55-4323bc279628"}],"ips": [{"address": "10.42.0.5/24","gateway": "10.42.0.1","interface": 2,"version": "4"}],"routes": [{"dst": "10.42.0.0/16"},{"dst": "0.0.0.0/0","gw": "10.42.0.1"}]
}

port-mapping 插件

该插件会将来自主机上一个或多个端口的流量转发到容器。

Debug

让我们在第一个节点上，使用 tcpdump 对接口 cni0 进行抓包。

tcpdump -i cni0 port 80 -vvv

从 pod curl 中使用 pod httpbin 的 IP 地址 10.42.1.2 发送请求：

kubectl exec curl -n default -- curl -s 10.42.1.2/get

cni0

从在 cni0 上的抓包结果来看，第三层的 IP 地址均为 Pod 的 IP 地址，看起来就像是两个 pod 都在同一个网段。

25ab58d0e44b353bf147d91b3a97981a.png
tcpdump-on-cni0

host eth0

文章开头提到 flanneld 监听 udp 8472 端口。

netstat -tupln | grep 8472
udp        0      0 0.0.0.0:8472            0.0.0.0:*                           -

我们直接在以太网接口上抓取 UDP 的包：

tcpdump -i eth0 port 8472 -vvv

再次发送请求，可以看到抓取到 UDP 数据包，传输的负载是二层的封包。

b888e6b20bc12ae1c65f7e62b897c33d.jpeg
tcpdump-on-host-eth0


Overlay 网络下的跨节点通信

在系列的第一篇中，我们研究 pod 间的通信时提到不同 CNI 插件的处理方式不同，这次我们探索了 flannel 插件的工作原理。希望通过下面的图可以对 overlay 网络处理跨节点的网络通信有个比较直观的认识。

ef34172b68c6d15a782bbf69007e31bc.gif

当发送到 10.42.1.2 流量到达节点 A 的网桥 cni0，由于目标 IP 并不属于当前阶段的网段。根据系统的路由规则，进入到接口 flannel.1，也就是 VXLAN 的 vtep。这里的路由规则也由 flanneld 来维护，当节点上线或者下线时，都会更新路由规则。

#192.168.1.12
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         _gateway        0.0.0.0         UG    0      0        0 eth0
10.42.0.0       0.0.0.0         255.255.255.0   U     0      0        0 cni0
10.42.1.0       10.42.1.0       255.255.255.0   UG    0      0        0 flannel.1
192.168.1.0     0.0.0.0         255.255.255.0   U     0      0        0 eth0
#192.168.1.13
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         _gateway        0.0.0.0         UG    0      0        0 eth0
10.42.0.0       10.42.0.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.1.0       0.0.0.0         255.255.255.0   U     0      0        0 cni0
192.168.1.0     0.0.0.0         255.255.255.0   U     0      0        0 eth0

flannel.1 将原始的以太封包使用 UDP 协议重新封装，将其发送到目标地址 10.42.1.0 （目标的 MAC 地址通过 ARP 获取）。对端的 vtep 也就是 flannel.1 的 UDP 端口 8472 收到消息，解帧出以太封包，然后对以太封包进行路由处理，发送到接口 cni0，最终到达目标 pod 中。

响应的数据传输与请求的处理也是类似，只是源地址和目的地址调换。

参考资料

[1] 

K3S: https://k3s.io/

[2] 

kube-flannel.yml: https://raw.githubusercontent.com/flannel-io/flannel/master/Documentation/kube-flannel.yml

[3] 

flannel-cni 源码 flannel_linux.go#L78: https://github.com/flannel-io/cni-plugin/blob/v1.1.0/flannel_linux.go#L78

[4] 

bridge 插件: https://www.cni.dev/plugins/current/main/bridge/

[5] 

flannel-cni 源码 flannel_linux.go#L40: https://github.com/flannel-io/cni-plugin/blob/v1.1.0/flannel_linux.go#L40

[6] 

host-local 插件: https://www.cni.dev/plugins/current/ipam/host-local/

[7] 

多种后端类型: https://github.com/flannel-io/flannel/blob/master/Documentation/backends.md



本文转载自：「云原生指北」，原文：https://url.hi-linux.com/D6HCf，版权归原作者所有。欢迎投稿，投稿邮箱: editor@hi-linux.com。

741daeddaade536f74b1b4191ce8047c.gif

最近，我们建立了一个技术交流微信群。目前群里已加入了不少行业内的大神，有兴趣的同学可以加入和我们一起交流技术，在 「奇妙的 Linux 世界」 公众号直接回复 「加群」 邀请你入群。

80e6578138ce8de04bcba501495ddfaa.png

你可能还喜欢

点击下方图片即可阅读

7c9c60c88041c390010de58afe309b7f.png

如何通过 Docker 快速部署开源密码管理器 Bitwarden

1937a7816d2e1d1076fa500e9f5ec717.png
点击上方图片，『美团|饿了么』外卖红包天天免费领

41aa426b145e32effddcd841220131fe.png

更多有趣的互联网新鲜事，关注「奇妙的互联网」视频号全了解！

http://www.lbrq.cn/news/2395423.html

相关文章：

  • 公众号注册入口官网重庆网络seo
  • 网站后台管理怎么做官网百度
  • 广东网站制作报价百度竞价官网
  • 品牌建设提升seo按照搜索引擎的什么对网站
  • 哪里有建站代理加盟百度问一问付费咨询
  • 郑州网站网站建设精准营销通俗来说是什么
  • 深圳专业网站建设公怎样建网站赚钱
  • 自己电脑怎么做网站官网建站多少钱
  • 哪个网站可以做初一政治试卷西安官网seo
  • 学做软件的网站有哪些内容营销型网站建设报价
  • pc端网站今日国内重大新闻事件
  • vs网站模态框怎么做百度关键词排名优化
  • behance app下载seo关键词优化软件官网
  • 什么网站做家电测评关键词查网址
  • 珠海电脑自己建网站福州百度seo代理
  • 自己做的网站能联网吗企业品牌类网站有哪些
  • 自建网站工具广告优化师是做什么的
  • 网站做sem优化国外市场网站推广公司
  • 湘潭做网站买转发链接
  • wordpress 有缓存吗seo网站关键词排名软件
  • 可以做cps合作的棋牌网站6排超最新积分榜
  • 潍坊做网站教程产品品牌推广策划方案
  • 网站远程图片市场营销推广策划方案
  • 东莞网站建设制作百度推广优化是什么?
  • 做金融的看哪些网站网站营销网
  • 微网站自己怎么做的吗百度seo查询收录查询
  • 济宁专业做网站重庆seo网络推广优化
  • 营销型企业网站推广的方法有哪些志鸿优化设计答案
  • 网站怎么做快照五个常用的搜索引擎
  • asp网站制作网络营销推广
  • FMEA-CP-PFD三位一体数字化闭环：汽车部件质量管控的速效引擎
  • Python+ArcGIS+AI蒸散发与GPP估算｜Penman-Monteith模型｜FLUXNET数据处理｜多源产品融合｜专业科研绘图与可视化等
  • 多式联运物流管理系统的设计与实现（原创）
  • windows wsl2-06-docker hello world
  • 腾讯 ChatBI 调研
  • camera2 outputbuffer的流转过程