H3C CAS-CVM虚拟化 业务网卡到网关交换机网络不通

您好，参考

1. 在新交换机：display interface，看端口是否 UP、CRC、错包；display link-aggregation verbose，看是否 Selected；display stp brief，看是否 discarding；核对 trunk、允许 VLAN、PVID；
2. 交叉：把故障主机光纤插到新交换机上一个已经正常的端口；把正常主机光纤插到这个故障端口，判断故障在【交换机端口配置】还是【主机 / 光模块】；
3. 如果是聚合：临时改成单 uplink，测试虚拟交换机端口能否起来；
4. 登录故障 CAS 主机后台，ovs-vsctl show，看 bond、uplink；在 CVM 上查看该主机虚拟交换机 uplink 状态，同步网络；
5. 在主机业务网卡抓包，看能不能发出 VLAN 标签、能不能收到网关 ARP；交换机侧同时镜像抓包，看报文是否抵达交换机；
6. 如果单口通、聚合不通：对齐两端 LACP / 静态聚合模式、负载分担。

检查标签打的是否正确

互联口是否放行vlan

物理层光功率正常≠链路协议 UP；其余两台正常说明 CVM 集群、虚拟交换机模板、VLAN 模板本身配置没有全局错误，问题集中在故障 CVK 主机、新上联交换机对应端口的配对、bond 聚合协商、trunk 放行、网卡驱动状态。

一、先区分两个状态（登录故障 CVK 后台 SSH）

1. 物理网卡状态：ethtool ethX，看物理 NIC 的PHY 物理 link 是否为 yes（光模块物理信号）
2. 虚拟交换机 Uplink 成员状态：CAS 网页【主机 - 虚拟交换机】看上行成员端口状态；ovs‑vsctl show看 ovs 网桥成员状态。

典型现象：ethtool看到物理 PHY 已经 up（收发光正常），但是 ovs 虚拟交换机里面该 Uplink 成员显示 down，业务不通。

高频故障原因（按现场概率排序）

1️⃣ 上联交换机聚合 LACP 模式两边不匹配（最高概率）

CAS 虚拟交换机如果是LACP 动态聚合（802.3ad）bond：

• 老交换机端口配置lacp active；更换新交换机后，新交换机对应端口配置成lacp passive或者静态 on 模式。
• 结果：光物理层 up，但是 LACP 协商失败，bond 成员无法加入聚合组，虚拟交换机 Uplink 状态异常，业务断；另外两台主机交换机端口配置正确，业务正常。

✅处理：新物理交换机上联 CVK 业务端口统一配置 lacp mode active，保持和 CAS 虚拟交换机 bond 模式一致。

注意：CAS 虚拟交换机 bond 模式有：静态负载分担、LACP 动态聚合；更换交换机之后聚合模式必须两端严格匹配。

2️⃣ 新交换机 Trunk VLAN 放行缺失、PVID 不一致

其余两台主机使用的端口已经放行业务 VLAN，故障主机对应的交换机端口漏放 VLAN，或者 PVID 不一致。

光口物理 link 可以 up，但是虚拟交换机转发异常；集群模板是统一的，但是新交换机端口配置复制遗漏。 ✅核对：新交换机故障主机上联端口，对比正常主机的端口配置，保证 permit vlan、pvid 完全一致。

3️⃣ 网卡驱动 / OVS 虚拟交换机没有识别到链路状态（物理 PHY up，ovs 识别为 down）

更换交换机插拔光纤之后，部分服务器万兆网卡驱动没有刷新链路状态，内核看到 PHY up，但 openvswitch 没有感知链路变化。

刷新之后观察 ovs‑vsctl show，uplink 成员状态是否恢复。

现象：网页虚拟交换机页面上行端口状态异常，但 ethtool 看物理是 link yes。

4️⃣ 交换机端口 STP/BPDU‑Protection err‑down

新交换机端口开启 BPDU 保护；CAS 主机虚拟交换机上行发出 BPDU 报文，交换机直接把端口 err‑down。

光模块收发光正常，端口物理 LED 可能还显示绿灯，协议被 err‑down 阻断，报文不通。

✅上联 CVK 业务服务器端口配置：stp edged‑port、关闭 BPDU 保护。

5️⃣ 光模块兼容性问题（虽然收发光正常）

新交换机光模块和 CVK 主机光模块存在兼容性，光功率检测正常，但链路协商异常；另外两台主机光模块型号不一样，没有触发问题。 处理：故障主机和正常主机互换光模块、尾纤，复现故障定位是否模块问题。

现场排错执行步骤（顺序）

1. 对比新交换机配置：把故障主机的上联交换机端口配置，和另外两台正常主机端口配置逐行对比，重点：trunk 允许 VLAN、PVID、LACP 模式、stp 边缘端口、BPDU 保护。

绝大部分案例出在这里，更换交换机复制配置漏项。

2. 登录故障 CVK 后台，确认物理网卡 link 状态

区分是物理层问题，还是 ovs 虚拟交换机层面识别异常。

3. 如果使用 LACP 聚合：交换机侧查看 LACP 邻居状态

看不到故障主机邻居，说明 LACP 协商失败，核对两端 LACP active 模式。

4. 若物理 link yes，但 ovs uplink down：执行网卡复位ethtool -r ethX，观察虚拟交换机状态是否恢复。
5. 检查交换机端口是否进入 err‑down 错误禁用状态。
6. 互换光模块尾纤，排除硬件兼容性。

收集信息，用于 400 提单

1. 故障 CVK 执行输出：ovs‑vsctl show；ethtool ethX
2. 上联交换机故障端口配置、display lacp neighbor、display err‑down
3. CAS 网页虚拟交换机截图（上行成员端口状态）

重要补充

其余两台主机正常，说明 CVM 集群、虚拟交换机模板、虚拟机网络策略配置本身没问题，故障点限定：故障 CVK 主机本身 + 新交换机对应端口配对配置，不需要修改 CVM 集群全局配置。

⚠️业务操作提醒：修改虚拟交换机配置需要将主机进入维护模式，避免虚拟机网络抖动。