Kubernetes、Cilium、Istio、MetalLB、系统服务等 TCP/UDP 端口说明

<think>我们正在配置Cilium的VXLAN隧道设备。根据用户的问题，他希望在Cilium中指定VXLAN隧道设备。在Cilium中，我们可以通过修改ConfigMap来配置VXLAN隧道设备。 根据引用[1]和引用[3]，VXLAN是一种覆盖网络技术，用于在底层三层网络上构建虚拟二层网络。Cilium使用VXLAN作为其隧道模式之一，以实现跨节点的Pod通信。 在Cilium中，配置VXLAN隧道设备主要涉及以下几个参数： 1. `tunnel`: 指定隧道协议，设置为`vxlan`。 2. `devices`: 指定Cilium使用的网络设备（如eth0），Cilium将基于这些设备来设置VXLAN隧道。 3. 其他相关参数，如`ipv4-range`（Pod CIDR）等，以确保网络地址不冲突。 步骤： 1. 获取当前的Cilium ConfigMap。 2. 修改ConfigMap，添加或修改相关参数。 3. 应用新的ConfigMap并重启Cilium。 具体操作如下： 步骤1：编辑Cilium ConfigMap ```bash kubectl -n kube-system edit configmap cilium-config ``` 步骤2：在ConfigMap的data部分添加或修改以下参数： ```yaml data: tunnel: "vxlan" # 明确指定隧道协议为VXLAN devices: "eth0" # 指定Cilium使用的网络接口，多个接口用逗号分隔，如"eth0,eth1" # 如果需要，还可以指定Pod的CIDR，避免IP冲突 # ipv4-range: "10.217.0.0/16" # 注意：如果集群已经运行，修改Pod CIDR需要谨慎，可能需要重新部署Pod ``` 步骤3：保存退出，然后重启Cilium DaemonSet以应用更改： ```bash kubectl rollout restart ds/cilium -n kube-system ``` 验证配置： 1. 等待Cilium Pod重启完成。 2. 进入一个Cilium Pod，检查VXLAN设备状态： ```bash kubectl -n kube-system exec -it <cilium-pod-name> -- cilium status ``` 在输出中，你应该能看到类似这样的信息： ``` Tunnel: vxlan ``` 3. 还可以通过以下命令查看VXLAN隧道的详细设置（如引用[4]所示）： ```bash kubectl -n kube-system exec -it <cilium-pod-name> -- cilium bpf vtep list ``` 注意事项： - 如果节点有多个网络接口，建议通过`devices`参数明确指定用于VXLAN隧道的接口，避免Cilium自动选择错误。 - 确保用于VXLAN隧道的网络接口具有唯一的IP地址，并且节点间可以通信。 - 如果之前因为地址冲突导致失败，在配置了`devices`后，应该可以避免冲突，因为Cilium会使用指定设备的IP地址作为VXLAN隧道的端点。 引用说明： [^1]: VXLAN是一种覆盖网络技术，用于在底层三层网络上构建虚拟二层网络。 [^3]: VXLAN使用24位的VNI来支持更多的二层网络。 [^4]: 可以使用`cilium bpf vtep list`命令查看VXLAN隧道设置。 如果配置后仍然遇到问题，请检查网络接口是否正确，以及是否仍然存在IP地址冲突。 现在，我们来生成相关问题：</think>### 在Cilium中配置VXLAN隧道设备的完整指南 在Cilium中配置VXLAN隧道设备需要修改ConfigMap或Helm值文件，以下是具体步骤和配置示例： #### 1. 通过ConfigMap配置（推荐） ```yaml # 编辑Cilium ConfigMap kubectl -n kube-system edit configmap cilium-config ``` 在`data`部分添加以下参数： ```yaml data: tunnel: "vxlan" # 明确指定隧道协议 devices: "eth0" # 指定主网络接口 vxlan-port: "8472" # 自定义VXLAN端口（默认8472） vxlan-adapter: "cilium_vxlan" # 自定义设备名（可选） auto-direct-node-routes: "false" # 禁用直接路由 ``` #### 2. 通过Helm安装时配置 ```bash helm install cilium cilium/cilium \ --namespace kube-system \ --set tunnel=vxlan \ --set devices='{eth0}' \ --set ipv4NativeRoutingCIDR=10.0.0.0/8 ``` #### 3. 关键参数说明 | 参数 | 默认值 | 说明 | |------|--------|------| | `tunnel` | geneve | **必须设为`vxlan`** | | `devices` | auto | 指定物理网卡(如`eth0`) | | `vxlan-port` | 8472 | VXLAN UDP端口 | | `vxlan-adapter` | cilium_vxlan | 虚拟设备名称 | | `auto-direct-node-routes` | true | VXLAN模式下需设为`false` | #### 4. 验证配置 ```bash # 检查Cilium状态 kubectl -n kube-system exec ds/cilium -- cilium status | grep Tunnel # 输出应显示: Tunnel: vxlan # 查看VXLAN设备详情 kubectl -n kube-system exec ds/cilium -- ip -d link show cilium_vxlan # 应显示: vxlan id 0 srcport 0 0 dstport 8472 # 检查VXLAN隧道端点 kubectl -n kube-system exec ds/cilium -- cilium bpf vtep list ``` #### 5. 高级配置示例 ```yaml # 多网卡环境配置 devices: "eth0,eth1" # 自定义VXLAN VNI（虚拟网络标识符） annotations: cilium.io/vxlan-vni: "10001" # 禁用TCP校验和卸载（解决某些网卡兼容问题） kubeProxyReplacement: strict bpf.masquerade: true ``` > **故障排除提示**：如果遇到`address already in use`错误，执行`sudo ip link del cilium_vxlan`删除残留设备后重启Cilium[^4]。 #### 6. 配置原理 Cilium VXLAN隧道的工作原理： 1. 在每个节点创建`cilium_vxlan`虚拟设备 2. 使用UDP端口8472封装二层帧 3. 通过VNI隔离不同集群的流量 4. 利用BGP或etcd维护VTEP（VXLAN Tunnel End Point）表[^3] 此配置使Cilium能在底层IP网络上创建覆盖网络，支持高达1600万虚拟网络（24位VNI空间），远超传统VLAN的4096限制[^1]。