某局点vStor容量充足的情况下,vStor界面创建LUN时提示可用容量为0。
步骤1:检查vStor和CAS主机的健康状态,发现vStor界面一个节点呈灰色,CAS界面一个节点处于连接异常状态,该节点为CVK15。
步骤2:vStor后台节点查询集群状态lich.cluster --list命令执行失败,CVK15这个节点连接异常。
步骤3:执行lich.cluster --stat命令执行失败,仍然是cvk15这个节点连接异常。
步骤4:ssh客户端登录这个节点登录失败,但是这个节点能够ping通。
步骤5:通过服务器ilo口登录这个节点,屏幕处于黑屏状态。初步确认这个节点处于挂死状态。
步骤6:查看syslog日志,确认处于挂住状态。
Feb 21 05:13:01 Vstor-cvk15 CRON[24132]: (root) CMD (root /opt/bin/novnc_check.sh)
Feb 21 05:13:01 Vstor-cvk15 CRON[24121]: (CRON) info (No MTA installed, discarding output)
Feb 21 05:13:01 Vstor-cvk15 CRON[24138]: (root) CMD
(root /opt/bin/cha_real_check_cvk.sh)
Feb 21 05:13:01 Vstor-cvk15 CRON[24122]: (CRON) info (No MTA installed, discarding output)
Feb 21 05:13:01 Vstor-cvk15 CRON[24120]: (CRON) info (No MTA installed, discarding output)
Feb 21 05:13:01 Vstor-cvk15 CRON[24119]: (CRON) info (No MTA installed, discarding output)
Feb 21 05:13:01 Vstor-cvk15 CRON[24123]: (CRON) info (No MTA installed, discarding output)
Feb 21 05:13:01 Vstor-cvk15 CRON[24115]: (CRON) info (No MTA installed, discarding output)
Feb 23 22:50:14 B10-Vstor-cvk15 kernel: imklog 5.8.6, log source = /proc/kmsg started.
Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: [origin software="rsyslogd" swVersion="5.8.6" x-pid="2610" x-info="***.***"] start
Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: rsyslogd's groupid changed to 103
Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: rsyslogd's userid changed to 101
Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd-2039: Could not open output pipe '/dev/xconsole' [try ***.***/e/2039 ]
Feb 23 22:50:14 B10-Vstor-cvk15 kernel: [ 0.000000] Initializing cgroup subsys cpuset
Feb 23 22:50:14 B10-Vstor-cvk15 kernel: [ 0.000000] Initializing cgroup subsys cpu
步骤7:查询这个节点的AHS日志信息,确认是Raid卡故障引起。
硬件故障导致CVK异常,使系统处于一种临界状态:能够ping通但是SSH失败的状态。导致零存储一直去获取数据,但是获取数据失败。
联系服务器厂家更换Raid卡,为了安全起见建议先将服务器踢出集群,等待硬件更换完成后再次加入到vStor集群中。
该案例暂时没有网友评论
✖
案例意见反馈
亲~登录后才可以操作哦!
确定你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作