• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 全部
  • 全部
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
高级搜索

X10000 2.0修复PG 不一致的步骤

2020-06-29 发表
  • -1关注
  • 0收藏,661浏览
粉丝:11人 关注:1人

组网及说明


问题描述

集群中出现pg不一致告警

[root@node30 ~]# ceph -s cluster: id: d4a48f0e-490d-4d80-aef3-43e3c9c99298 health: HEALTH_ERR 2 scrub errors Possible data damage: 1 pg inconsistent services: mon: 3 daemons, quorum node30,node31,node32 mgr: node30(active), standbys: node31, node32 osd: 90 osds: 90 up, 90 in data: pools: 2 pools, 8192 pgs objects: 52231 objects, 202 GB usage: 2992 GB used, 326 TB / 329 TB avail pgs: 8191 active+clean 1 active+clean+inconsistent io: client: 115 MB/s wr, 0 op/s rd, 490 op/s wr

过程分析


解决方法

步骤1:提前关闭scrubdeep-scrub,任意节点执行:

ceph osd set noscrub

ceph osd set nodeep-scrub

 

步骤2:当没有pg在进行scrubdeep-scrub的时候,调整max_scrubs参数:

ceph tell osd.* injectargs --osd_max_scrubs=100

ceph tell mon.* injectargs --osd_max_scrubs=100

可以使用以下命令确认是否修改成功:

ceph daemon osd.X config show|grep max_scrubs

 

步骤3:根据ceph health detail 的输出找到需要修复的pg编号;

 

步骤4:执行修复命令:ceph pg repair PGID,且查看ceph spg在进行repair

 

步骤5:等待pg修复完成,根据之前两个pg的修复情况可能会较长时间(2个小时以上)。

可以观察主osd的日志进行确认:

tailf /var/log/ceph/ceph-osd.X.log |grep fixed  (当有fixed输出是表示修复成功)

 

步骤6:重复步骤3-步骤5修复其他pg,根据修复时间控制修复pg数量避免影响白天业务。

 

步骤7:结束修复之后将max_scrub值调回默认值:

ceph tell osd.* injectargs --osd_max_scrubs=1

ceph tell mon.* injectargs --osd_max_scrubs=1

 

可以使用以下命令确认是否修改成功:

ceph daemon osd.X config show|grep max_scrubs

 

步骤8:关开启scrubdeep-scrub,任意节点执行:

ceph osd unset noscrub

ceph osd unset nodeep-scrub

0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作