(0)
告警:`ovs-vswitchd`进程异常,原因是**段错误 /assert 断言失败**,是打补丁后出现,说明补丁替换了 OVS 二进制程序,新版本 OVS 程序内部逻辑触发崩溃,**会直接影响虚拟机虚拟网络转发,虚拟机网卡不通**。
>
> 环境:两节点 H3C CAS 超融合,节点 YUM02(172.17.1.4),补丁安装完成但服务未生效。
> ovs-vswitchd 是虚拟化 SDN 虚拟交换机核心进程,负责虚拟机 vnet、VXLAN、虚拟网桥转发。
## ⚠️ 重要前提
两节点集群,**优先业务保护,先确认虚拟机运行状态**。
>
> 建议先把 YUM02 节点上的虚拟机迁移到另一台正常节点,避免虚机断网。
## 分步处理(由浅入深)
### 步骤 1:登录故障主机后台,查看进程状态
SSH 登录 `172.17.17.4`
```
#查看ovs相关进程
ps -ef | grep ovs
#查看服务状态
systemctl status ovs-vswitchd
#查看崩溃日志(重点,定位assert/段错误原因)
cat /var/log/openvswitch/ovs-vswitchd.log
```
日志里会打印 assert 报错行号,确认是补丁包自带 OVS 版本 bug。
### 步骤 2:尝试手动重启 OVS 服务(临时应急)
```
#停止OVS全套服务
systemctl stop ovs-vswitchd
systemctl stop ovsdb-server
#清理残留pid
rm -rf /var/run/openvswitch/*.pid
#启动
systemctl start ovsdb-server
systemctl start ovs-vswitchd
#验证
ovs-vsctl show
```
✅ 如果启动成功:告警消失,虚拟机网络恢复。
❌ 启动后立刻 crash、反复崩溃:说明补丁包内 ovs-vswitchd 程序本身存在缺陷,**单纯重启无法根治**。
>
> 典型场景:补丁包的 OVS 版本和底层内核 / 驱动不匹配,补丁版本不兼容当前 CAS 基线版本,触发 assert 断言崩溃。
### 步骤 3:判断补丁状态(你说服务还没生效)
H3C CAS 补丁很多是**安装包上传完成,但需要主机重启才会加载新的 ovs 二进制**
1. 确认补丁任务:平台看补丁是否已经执行完成、是否提示需要**主机重启**;
2. 如果补丁说明要求重启:**业务低峰,虚拟机迁移到对端节点后,重启 YUM02 节点**。
>
> 很多 CAS 的 OVS 补丁,安装只是把文件写入磁盘,**内核 / 新版程序需要重启主机才加载**,不重启就会新旧版本混跑,直接触发段错误崩溃。
### 步骤 4:如果重启后依然 crash(补丁本身 bug)
1. **回滚补丁**:在 CAS 平台补丁管理页面,卸载本次打的补丁,恢复升级前原始 OVS 程序;
2. 回滚完成后,再次重启主机,验证 ovs-vswitchd 正常运行,告警清除;
3. 联系 H3C400,确认这个补丁包是否适配你的 CAS 版本,确认该 ovs 崩溃是否为已知 TD 缺陷。
## 两节点集群注意事项
1. **不要两台节点同时打补丁**,滚动升级:一台处理完毕、验证正常后,再处理第二台;
2. 故障节点 YUM02 如果 ovs 持续崩溃,**该节点上所有虚拟机网络都会中断**,务必在线迁移虚机到另一节点;
3. 不要反复强制重启 ovs,频繁崩溃会产生大量 core 转储文件,占满主机磁盘。
## 快速验证命令
```
#查看网桥和虚拟端口
ovs-vsctl show
#查看ovs进程是否正常运行
pidof ovs-vswitchd
#查看系统崩溃core文件
ls -lh /var/lib/systemd/coredump/
```
## 什么时候直接开 400 工单
- 重启主机后 ovs-vswitchd 依然反复崩溃;
- ovs 日志明确 assert/segfault 段错误;
- 补丁包是 H3C 官方发布,出现该现象属于版本缺陷,需要提交日志、core dump 给 H3C 研发定位。
## 排查优先级总结
1. 迁移 YUM02 上虚拟机到另一节点,保护业务
2. 确认补丁是否需要主机重启生效
3. 尝试手动重启 ovs 服务
4. 查看 ovs-vswitchd 日志确认崩溃原因
5. 无效则卸载补丁回滚,联系 H3C400 确认补丁兼容性
(0)
暂无评论
亲~登录后才可以操作哦!
确定你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作
举报
×
侵犯我的权益
×
侵犯了我企业的权益
×
抄袭了我的内容
×
原文链接或出处
诽谤我
×
对根叔社区有害的内容
×
不规范转载
×
举报说明
暂无评论