• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

CloudOS根分区占用100%问题排查

2018-12-13 发表
  • 0关注
  • 2收藏 2409浏览
粉丝:2人 关注:0人

组网及说明

CloudOS安装部署完成后,需要定期巡检来监测平台运行状态。

问题描述

在使用df -h命令查看磁盘占用情况时,发现CloudOS根分区占用100%。


过程分析

首先需要查找出空间被占满原因,使用du -sh * | grep G命令逐级查找



查看nova-conductor.log日志内容,发现有以下日志反复打印

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db [-] Unexpected error while reporting service status

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db Traceback (most recent call last):

b.py", line 90, in _report_state

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     service.service_ref.save()

py", line 223, in wrapper

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     return fn(self, *args, **kwargs)

ine 297, in save

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     db_service = db.service_update(self._context, self.id, updates)

in service_update

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     return IMPL.service_update(context, service_id, values)

in wrapper

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     ectxt.value = e.inner_exc

ne 220, in __exit__

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self.force_reraise()

ne 196, in force_reraise

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     six.reraise(self.type_, self.value, self.tb)

in wrapper

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     return f(*args, **kwargs)

 line 300, in wrapped

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     return f(context, *args, **kwargs)

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db   File "/usr/lib64/python2.7/contextlib.py", line 24, in __exit__

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self.gen.next()

cade.py", line 760, in _transaction_scope

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     yield resource

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db   File "/usr/lib64/python2.7/contextlib.py", line 24, in __exit__

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self.gen.next()

cade.py", line 495, in _session

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self._end_session_transaction(self.session)

cade.py", line 516, in _end_session_transaction

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     session.commit()

", line 813, in commit

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self.transaction.commit()

", line 392, in commit

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self._prepare_impl()

", line 372, in _prepare_impl

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self.session.flush()

", line 2027, in flush

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     self._flush(objects)

", line 2145, in _flush

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     transaction.rollback(_capture_exception=True)

rs.py", line 60, in __exit__

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     compat.reraise(exc_type, exc_value, exc_tb)

", line 2109, in _flush

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     flush_context.execute()

.py", line 373, in execute

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     rec.execute(self)

.py", line 532, in execute

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     uow

e.py", line 170, in save_obj

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     mapper, table, update)

e.py", line 728, in _emit_update_statements

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db     (table.description, len(records), rows))

ate 1 row(s); 2 were matched.

2018-05-21 12:05:20.273 1260 ERROR nova.servicegroup.drivers.db

异常增长导致根分区被占满

解决方法

1、首先通过echo>nova-conductor.log命令清空日志内容;


2、需要联系研发来具体分析日志异常增长的原因,这个问题是由于数据库nova-conductor ID与其它冲突导致,研发修改nova-conductor ID后已不再打印异常日志。

该案例对您是否有帮助:

您的评价:1

若您有关于案例的建议,请反馈:

作者在2019-06-11对此案例进行了修订
0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作