• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

uis超融合前台任务异常结束不掉

2天前提问
  • 0关注
  • 0收藏,46浏览
粉丝:0人 关注:0人

问题描述:

uis超融合前台任务异常卡断始终在99%

4 个回答
粉丝:0人 关注:1人

重启试下


暂无评论

粉丝:21人 关注:1人

在H3C UIS超融合平台中,前台任务(如删除快照、迁移等)卡在99%是一个比较常见的现象。这通常是因为后台的合并或数据处理任务仍在运行,但前端监控通道异常导致进度无法实时刷新;或者是存储性能较低、数据量大导致后台耗时较长。
针对这种“假死”或卡断的情况,建议您按照以下步骤进行排查和处理:

1. 确认后台任务是否真的“卡死”

不要仅依赖Web界面的进度百分比,建议通过SSH登录到UIS底层主机进行确认:
  • 检查相关进程:执行 ps aux | grep qemu-img 命令,查看是否有相关的镜像处理进程在运行。如果看到进程且CPU或IO有持续变化,说明任务仍在后台进行,只是Web界面未刷新,建议继续耐心等待。
  • 检查虚拟机磁盘状态:使用 virsh list --all 找到对应的虚拟机ID,然后执行 virsh qemu-monitor-command <虚拟机名称> --hmp --cmd "info block-jobs" 来查看当前是否有正在执行的 commit 或其他块设备任务。如果回显中的数据仍在变化,说明后台仍在处理。

2. 重启前端服务(清除残留任务)

如果经过第一步确认后台任务其实已经执行完毕,或者您确定需要强制中断当前卡住的前台显示,可以通过重启前端核心服务来解决:
  • 进入前台所对应的主机,执行 service uis-core restart 重启前端服务。
  • 重启后使用 service uis-core status 查看进程状态。这通常可以清除界面上残留的异常任务条。
    (注:高版本UIS不建议直接重启Tomcat,而是推荐重启 uis-core 服务)

3. 强制取消后台任务(高风险操作)

如果确认后台任务确实卡死且长时间无进展,可以尝试手动终止任务。请注意,此操作风险较高,可能导致虚拟机磁盘快照链不一致,被取消的任务也无法恢复,仅在特殊情况下使用
  • 首先获取具体任务信息:virsh qemu-monitor-command <虚拟机名称> --pretty '{"execute":"query-block-jobs"}',记录下 device 的名称(例如 drive-virtio-disk0)。
  • 执行强制取消命令:virsh qemu-monitor-command <虚拟机名称> '{"execute":"block-job-cancel","arguments":{"device":"drive-virtio-disk0", "force":true}}'

4. 其他注意事项

  • 对于大容量磁盘(如8T卷)的合并或转换操作,由于需要重新计算镜像哈希值,耗时非常长(可能需要数小时甚至以天为单位),卡在99%也可能是正常的耗时表现。
  • 如果在尝试上述底层命令时遇到复杂报错,或者不确定当前的镜像链状态,最稳妥的方式是收集相关日志并联系H3C 400技术支持协助分析处理。

暂无评论

粉丝:131人 关注:11人

可以通过重启服务强制结束任务,任务卡住属异常,可联系400确认


前台任务清理:主节点c"z

service tomcat8 restart

service uis-core restart

注意前台不要有其他任务

暂无评论

粉丝:16人 关注:2人

UIS 超融合任务卡在 99%、前台无法结束完整排错方案

一、先区分 2 种场景(关键)

  1. 底层进程还在跑,只是前台页面进度卡死(存储均衡、磁盘合并、迁移、快照、精简置零)
  2. 底层进程已异常退出,但前台任务状态锁死,无取消按钮(管理服务同步异常)

二、第一步:前台页面标准操作(优先尝试,无风险)

  1. 进入【监控】-【任务中心】,选中卡住 99% 的任务
  2. 查看是否有终止 / 取消按钮:
    • 按钮可点击:直接终止,等待自动回滚,刷新页面看状态
    • 按钮灰色 / 点击无响应:进入后台命令行处理

三、第二步:SSH 登录 CVM 管理节点,命令强制终止任务(通用)

1. 登录集群管理 VIP / 主 CVM 节点

账号:admin,默认密码Admin@123

2. 查询所有运行中任务,获取 TaskID

bash
运行
uis-cli task list --status running
输出里找到卡住的任务,记录task-id(task-xxxx)

3. 强制取消前台任务

bash
运行
uis-cli task cancel --task-id task-xxxx
执行完成后刷新 UIS 前台,任务会变为失败状态。

补充:旧版 CAS/UIS(cascli)命令

bash
运行
# 查看任务 cascli task list # 终止任务 cascli task stop 任务ID

四、第三步:如果是 ONEStor 存储相关任务(均衡 / PG 迁移 / 磁盘合并卡 99%)

很多 99% 卡住是底层 CEPH 存储任务未完成,前台只是状态不同步,必须先停底层存储任务,再清前台任务:
  1. 登录存储节点 root 账号,查看集群后台任务
bash
运行
ceph -s # 查看正在回填/迁移的PG ceph pg dump | grep backfill
  1. 停止集群均衡,防止继续迁移
bash
运行
ceph osd set norebalance ceph osd set noout
  1. 若存在大量 backfill,彻底停止均衡任务
bash
运行
ceph osd cancel backfill <pg_id>
  1. 底层存储任务停完后,再执行uis-cli task cancel清理前台残留任务

五、第四步:兜底方案(命令终止无效,任务锁死)

方案 A:重启 UIS 管理服务(不影响虚拟机业务)

bash
运行
systemctl restart uis-core # 或旧版本 service cas-service restart
服务重启 1~3 分钟,前台所有卡死任务队列全部重置,页面刷新后消失。

方案 B:清理 handy 存储管理任务(ONEStor 专用)

bash
运行
handy-cli # 查看运行任务 task list running # 标记任务失败 task fail 任务ID

六、任务卡 99% 根因排查(避免重复出现)

  1. 存储资源瓶颈(最高发)
    磁盘慢盘、OSD 高延迟、存储池空间不足、带宽打满,IO 阻塞导致数据收尾阶段停滞。
    排查:iostat -x 1ceph osd perf看磁盘延迟。
  2. 虚拟机磁盘镜像损坏 / 快照链过长
    快照、精简置零、三级镜像合并极易卡在 99%,建议先备份虚拟机再操作。
  3. 集群网络丢包
    节点间存储网、业务网丢包,数据同步中断。
  4. 版本 BUG
    老版本 UIS(R0605 及更早)存在任务状态同步缺陷,升级至 R0615/R0700 稳定版修复。
  5. 节点资源耗尽
    CVM 节点 CPU / 内存打满,后台任务进程卡死。

七、风险提醒(强制终止前必看)

  1. 快照、磁盘合并、精简置零强制终止可能导致磁盘镜像损坏,操作前务必打快照备份虚拟机;
  2. 存储均衡任务中途停止会产生数据碎片,后续需要手动触发均衡;
  3. 虚拟机存储迁移强制终止会自动清理目标临时磁盘,虚拟机业务不会中断;
  4. 不要直接 kill ceph/uis 后台进程,优先使用官方uis-cli命令,避免集群元数据损坏。

快速处理流程(现场直接执行)

  1. 前台点终止 → 无效
  2. SSH 执行uis-cli task list拿 ID → uis-cli task cancel
  3. 存储任务卡 99%:先 ceph 停均衡,再清前台任务
  4. 仍无效:重启uis-core管理服务
  5. 事后检查存储 IO、磁盘健康度,必要时升级 UIS 版本

暂无评论

编辑答案

你正在编辑答案

如果你要对问题或其他回答进行点评或询问,请使用评论功能。

分享扩散:

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作

举报

×

侵犯我的权益 >
对根叔社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 pub.zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明