3par存储降级异常

 第一步：在 ESXi 主机侧排查链路与日志

1. 检查多路径与设备状态：
   通过 SSH 登录到 ESXi 主机，执行以下命令查看存储路径状态：
   • esxcli storage core path list：查看所有路径，确认是否有路径处于 Dead 或 Off 状态。
   • esxcli nmp path list：查看多路径（NMP）的具体状态，确认是否有路径被标记为失效。
   • vicfg-scsidevs -l：交叉验证设备列表的一致性。
2. 分析内核日志（vmkernel.log）：
   这是定位问题的关键。在 ESXi 的 /var/log/vmkernel.log 中检索是否有存储相关的报错：
   • 常用检索命令：grep -i "scsi\|fcp\|lost\|reset\|error" /var/log/vmkernel.log | tail -50
   • 重点关注的典型错误：
     • Link down on port X：表示 HBA 卡端口断开，可能是光纤线松动或光模块故障。
     • Lost device path for naa.xxxxx：路径丢失事件。
     • SCSI command timeout 或 failed H:0xc：I/O 超时或瞬态存储条件错误，通常由链路拥塞、阵列响应慢或驱动不兼容引起。
3. 检查 HBA 卡驱动与固件：
   使用命令 esxcli system module parameters list -m qla2xxx（以 QLogic HBA 为例）查看当前驱动版本，并对比 VMware 兼容性指南（HCL）或 HPE 官方兼容性列表（SPOCK），确认驱动和固件版本是否匹配且符合要求。

 第二步：确认 3PAR 存储阵列侧的真实状态

• 检查物理磁盘（Physical Disk）状态：确认 3PAR 阵列中是否有物理磁盘处于 Degraded 或 Failed 状态。当 3PAR 的某个物理磁盘出现问题时，Servicemag 会自动开始数据重定位，此时磁盘会被标记为降级。
• 检查控制器与端口状态：确认 3PAR 的控制器节点、前端 FC 端口是否存在报错、高误码率（CRC错误）或正在进行控制器故障切换（Failover）。
• 查看阵列事件日志：在 3PAR 管理端查看具体的告警日志，确认是否是因为阵列内部正在进行重构、重定位或其他维护操作。

 第三步：区分“存储降级”与“主机路径降级”

• 如果是存储设备本身降级：通常是因为 3PAR 后端有硬盘故障或 RAID 组异常。此时 ESXi 只是如实反映了存储的健康度。你需要联系存储管理员或 HPE 售后对 3PAR 进行硬件更换或修复。
• 如果是主机路径降级：即存储阵列一切正常，但 ESXi 显示某条路径降级。这通常是光纤线、HBA 卡、光模块或光纤交换机端口的问题。可以尝试更换光纤线、更换交换机端口，或者在确认多路径策略（如 Round Robin）配置正确的情况下进行隔离测试。

一、先分清：是 ESXi 报降级，还是 3PAR 本身降级？

1）在 ESXi 上看到的提示

• Path redundancy to storage device naa.xxxx degraded
• 存储设备状态：正常（已降级）VMware Support Portal

2）3PAR 自身降级（盘 / RAID / 硬件）

• showpd -i 出现 degraded/failed → 存储侧真降级。
• 全 normal → 降级来自 ESXi 多路径 / 网络。

二、最常见原因：ESXi 多路径不全（单路径）

1）查看路径数量（ESXi 里执行）

• 只看到 1 条 / 2 条路径 → 降级原因明确。
• 路径状态 Dead/Error → 链路 / 授权问题VMware Support Portal。

2）为什么路径少？

• iSCSI 场景
  • 只绑了一个网卡，没做多端口绑定（port binding）。
  • 子网 / VLAN 不通、防火墙 / ACL 拦了 iSCSI 端口（3260）。
  • 3PAR 侧 VLUN 只映射到一个控制器 / 一个端口。
• FC 场景
  • Zoning 只划了一个 HBA → 一个存储端口。
  • 光纤线 / 模块坏、交换机端口 down。
• 3PAR 侧
  • VLUN 映射不全（只映射到 node0，没到 node1）。
  • 控制器端口 down、故障。

三、快速修复步骤（先做这几步）

1）ESXi 侧：补全多路径（iSCSI 为例）

1. vCenter → 主机 → 配置 → 存储适配器 → 选 iSCSI 软件适配器。
2. 网络绑定：添加两个以上 VMkernel 端口（不同网卡）。
3. 重新扫描存储：
   bash

   运行

   esxcli storage core adapter rescan --all
4. 再看路径：每个 LUN 应该 ≥4 条路径，状态 Active。

2）3PAR 侧：检查 VLUN 映射

3）网络 / 授权检查

• iSCSI：ping 3PAR 每个 iSCSI 端口，telnet 3260 通不通。
• FC：检查 Zoning 配置，HBA WWN 是否正确加入 zone。
• 3PAR：showhost 看 ESXi 的 IQN/WWN 是否存在、状态正常。

四、如果是 3PAR 本身降级（坏盘 / RAID）

1）确认

2）处理

• 3PAR 会自动重建到热备盘，等重建完成（showpd -s 看 relocating）。
• 重建完仍降级 → 换盘。

五、ESXi 特有坑（容易误报）

• ESXi 7.0 U3 与 3PAR vVol 兼容性 bug：会无故丢路径、报降级，需要升级 ESXi 补丁或改参数。
• 驱动 / 固件不兼容：HBA 卡驱动、固件太老，与 3PAR 端口协商异常 → 路径频繁 downVMware Support Portal。

六、一句话总结排查顺序

1. ESXi：看路径数（必须 ≥4）→ 不够就是多路径问题。
2. 3PAR：showpd/showvlun → 确认无坏盘、映射完整。
3. 网络：iSCSI/FC 连通性、授权、Zoning。
4. 最后查：驱动固件、ESXi 版本兼容性VMware Support Portal。