现有一台HP MSA 2040 存储,建有A和B两个存储池, 因前端vmware vcenter 操作在线迁移一个虚拟机时,意外导致A池和B池存储空间全部占满,现在导致主控A和主控B都无法正常登录web 页面,存储本身硬件指示灯正常,前端3台exsi主机 web页面也无法访问,3台主机上运行的部分虚拟机业务中断。已测试使用mini usb 线路直接连接存储msa 2040 调试,通过mini usb 连接主控B上重启主控A ,重启主控A后,无法通过web页面登录主控A网页,主控B网页登录进去白屏。通过CLI 命令行 主控A(已重启)和主控B(未重启) 报错如下图,请问在不影响当前存储数据的情况下。如何妥善处理才能让存储恢复正常?(目前仅能通过SSH及MINI USB方式登录) 主控A(重启后)状态

主控B (未重启)和主控A(重启前)状态

HP MSA 2040 建有A和B 2个存储池(ISCSI SAN) 用过光纤交换机 和三台HP DL580 G10 互联,当前存储空间占满,web 页面无法显示,但是存储设备本身指示灯未有告警。
MSA2040 虚拟存储池(Virtual Pool)100% 占满之后,管理控制器 MC(SMU 网页服务)无法正常读写元数据,直接表现:Web 白屏、登录失败;但是底层磁盘 RAID、LUN、数据本身没有损坏,IO 会卡住、VM 业务中断,这是 MSA2040 非常经典的 pool 满故障。 现象:硬件指示灯正常、CLI(mini-USB/SSH)还能进、只是 Web 挂掉;不要直接重启存储整机、不要随便重启控制器、不要删除正在使用的虚拟机卷! 你在线迁移 VMware 虚拟机,精简卷持续分配空间,瞬间把 A、B 两个池全部打满,同时 ESXi 主机存储 IO 阻塞,ESXi 页面也打不开。
重点:优先释放快照空间!MSA2040 快照是占用 Pool 物理空间头号元凶,删除快照是最安全、不碰虚拟机业务数据的手段;其次才是处理废弃 / 闲置卷。 另外:精简配置卷,VMware 侧删除虚拟机后,MSA 不会自动回收空间,需要 UNMAP(SCSI 取消分配),但空间已经被打满时 UNMAP 无法执行,必须先删快照腾出空间。
应该怎么样释放快照空间 使用什么命令呢
The MC is not ready 是【存储池 A/B 全部打满】引发的管理控制器 (MC) 卡死;SC(存储控制器,负责前端 VMware IO)还在工作,但 MC(Web / 管理查询模块)因为元数据无空间、无法刷新数据,直接拒绝管理查询,Web 白屏、show system 报错;不是硬件坏了。
关键点:SC 和 MC 是控制器内两个独立进程:SC 管业务 IO,MC 管 SMU 网页、CLI 查询、统计;池满 → MC 元数据写不进去,直接锁死;但底层数据本身没有损坏,只要先释放少量空间,MC 即可恢复,优先不要再次重启主控!频繁重启会有缓存脏数据丢数据风险。 触发场景:Storage vMotion 迁移时,会持续写快照 / 增量元数据、精简空间,瞬间把两个池打满,VMware 侧 VMFS 锁死、虚拟机无效、vCenter 无法访问存储。
⚠️前置红线(非常重要)
- 不要再重启任何主控 A/B! 现在池满,缓存脏数据无法落盘,重启极易损坏卷 / 元数据、丢虚拟机磁盘。
- 只使用 Mini USB/SSH CLI 操作,不要反复刷 Web;Web 依赖 MC,现在 MC 卡死,反复刷新加重负载。
- 优先目标:释放少量空间(几十 GB 即可),让 MC 恢复正常,而不是一次性清大量数据;MC 只要有一点点空闲,就能恢复管理接口。
- 不要直接删除业务虚拟机卷!优先清理MSA 本身快照、快照池(snap-pool),这是 MSA 池满最容易快速释放空间的来源。
登录其中一个主控 CLI(USB/SSH),依次执行:
# 查看存储池状态(优先用这个,部分版本该命令不依赖MC全量刷新)
show pools
# 列出所有快照(重点!快照占用大量池空间,vMotion也会产生快照增量)
show snapshots
# 列出快照池 snap-pool
show snap-pools
# 查看所有volume(LUN)
show volumes
# 查看系统事件日志
show events
如果
show pools也报 MC not ready:直接走快照清理命令,快照命令底层直接调用 SC,对 MC 依赖低。
MSA 快照是独立占用池空间,删除快照不会影响原业务卷数据
# 查看快照列表拿到快照名称,例如snap_xxx
show snapshots
# 删除单个快照
delete snapshot <快照名>
# 强制删除(快照被引用、普通删除报错时使用,谨慎)
delete snapshot force <快照名>
重点:如果存在snap-pool(快照池),snap-pool 耗尽会直接锁死整个父池,优先清理 snap-pool 内快照。 只要删掉几个快照,释放几十 GB 空闲,立刻再试
show system,大概率 MC 恢复、Web 可以打开。
MSA 精简置备 thin volume,VMware 删除文件后,MSA 不会自动回收,空间被占用。 前提:先在 ESXi 侧把关机 / 无效虚拟机删掉、清空 VMFS 快照,然后在 MSA 侧对 thin 卷做空间回收。
# 对指定卷执行精简空间回收
reclaim volume <卷名>
回收任务后台跑,不要中断;回收速度慢,优先快照。
必须确认这个 LUN 没有任何虚拟机挂载、无业务,确认后再删:
delete volume <卷名>
❌严禁直接删正在被 ESXi 挂载、有业务的 volume。
释放空间后,等待 2~5 分钟(MSA MC 需要时间刷新元数据),再执行:
show system
不再报The MC is not ready,说明管理控制器恢复;此时 SMU Web 页面可以正常打开。
Web 恢复后:
这个故障是典型的管理面卡死,业务面 SC 还存活,所以你看到指示灯正常,虚拟机只是无效(VMFS 文件系统锁)而不是磁盘离线。
❌ 不要双主控同时重启
❌ 不要在池满状态下执行 controller failover 主备切换
❌ 不要执行clear disk-metadata、强制离线 vdisk 等底层命令
❌ 不要在 vCenter 强制删除虚拟机磁盘(存储层还存在)
亲~登录后才可以操作哦!
确定你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作
举报
×
侵犯我的权益
×
侵犯了我企业的权益
×
抄袭了我的内容
×
原文链接或出处
诽谤我
×
对根叔社区有害的内容
×
不规范转载
×
举报说明
应该怎么样释放快照空间 使用什么命令呢