UISE0802有一个节点所有硬盘异常

硬盘物理故障了？

节点所有硬盘异常的修复步骤如下（请按顺序操作）：

1. 基础检查与维护模式操作

• 检查存储状态
  登录节点后台执行：

  ceph -s # 确认存储集群健康状态
  • 若集群整体健康（Health_OK），但前台显示异常 → 可能为前台服务异常，跳到步骤3。
  • 若部分OSD异常 → 继续执行后续步骤。

• 进入维护模式
  在UIS管理界面将节点进入维护模式（操作前需迁移虚拟机）：

  # 节点后台执行命令同步时间并重启 sync && hwclock -w && shutdown -h now

  📌 注意：
  若节点有业务虚拟机无法停机 → 先迁移虚拟机至正常节点，再进入维护模式。

2. 硬盘异常处理

场景1：前台显示异常（物理盘实际正常）

• 重启进程
  执行以下命令修复前台显示：

  supervisorctl restart onestor-peon # 重启存储管理进程 service apache2 restart # 重启Web服务

• 检查残留挂载点
  若此前换盘未卸载旧OSD：

  mount | grep osd # 检查异常OSD挂载点 umount /var/lib/ceph/osd/ceph-{异常OSD编号} # 手动卸载残留挂载点

场景2：物理硬盘故障

• 更换故障硬盘
  按《部件更换指导》操作：
  1. 在UIS界面删除故障硬盘（路径：主机管理 > 选择主机 > 更多操作 > 删除主机）。
  2. 物理更换硬盘后，通过RAID工具配置新盘（如作RAID0/JBOD）。
  3. 在界面重新发现主机并加入集群。

3. 高级修复（若上述无效）

• 强制删除残留OSD
  后台手动删除故障OSD（需谨慎）：

  ceph osd crush remove osd.{ID} # 移除CRUSH映射 ceph auth del osd.{ID} # 删除认证密钥 ceph osd rm osd.{ID} # 删除OSD ceph-disk zap /dev/{磁盘名} # 格式化磁盘

• 数据库残留清理
  若前台仍显示异常硬盘（PostgreSQL残留数据）：

  sudo -u postgres psql calamari # 进入数据库 SELECT * FROM op_cluster_disk WHERE host_name='节点名'; # 查询异常硬盘 DELETE FROM op_cluster_disk WHERE sn='异常硬盘SN号'; # 删除残留记录

4. 验证恢复

• 重启节点后检查：ceph -s # 确保集群状态为`Health_OK` lsblk # 确认所有硬盘识别正常 ntpstat # 检查时间同步状态
• 在UIS界面确认：
  1. 节点状态恢复正常。
  2. 存储界面无"clock skew"或"缓存异常"告警。

⚠️ 重要说明

1. 数据备份：操作前确保业务数据已备份。
2. 多节点异常：若多个节点故障，需逐个修复，避免同时操作。
3. 技术支持：若以上步骤无法解决 → 立即联系H3C技术支持（400-810-0504），提供以下信息：
   • ceph -s 输出
   • /var/log/ceph/ 日志
   • 操作前后的UIS界面截图

📘 参考文档：

• UIS应急故障恢复指南
• 部件更换配置指导（5W120）