• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

某局点S6520X堆叠重启后堆叠口不UP问题

  • 0关注
  • 0收藏 857浏览
粉丝:29人 关注:3人

组网及说明

/

告警信息

/

问题描述

现场在97日进行网络切换测试时,对APP-DSHLW-SW这两组S6520X堆叠环境进行重启切换后出现堆叠口不up问题,后于1120日凌晨,对XX-B05-N05-OMS-ASW-6520这一组操作尝试复现,重启备设备后复现了堆叠口不up问题。

过程分析

1120日复现的故障现象进行分析,该组设备以4950口进行堆叠,重启备板slot2后,50口出现不UP问题。

1、  首先确认故障现象,堆叠口50口出现不UP情况

  ===============display irf link=============== 

Member 1

 IRF Port  Interface                             Status

 1         disable                               --   

 2         FortyGigE1/0/49                       UP   

           FortyGigE1/0/50                       DOWN 

Member 2

 IRF Port  Interface                             Status

 1         FortyGigE2/0/49                       UP   

           FortyGigE2/0/50                       DOWN 

 2         disable                               --   

=========================================================

2、  确认底层UP信息,确实50口物理上不up,但查看底层速率模式配置未发现异常。

  ===============phy info 1 xq=============== 

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]  

 hg1 (20)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

 hg2 (16)  -   -    ena/  -  down/ -   40000/  -   FD/-   N/- FWD    CR4/ -

============================================================

  ===============phy info 2 xq=============== 

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]  

 hg1 (20)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

 hg2 (16)  -   -    ena/  -  down/ -   40000/  -   FD/-   N/- FWD    CR4/ -

3、  查看底层serdes信息,发现未重启侧的1/0/50SinalDetectFALSE,重启侧的2/0/50正常。

[XX-B05-N05-OMS-ASW-6520-probe]serdes read 1 0 50 0 //未重启侧的serdes信息。

… …

*******************************************************

***********Port Parameter********uiPhyPortNo[16]********

 SignalDetect  FALSE

 AutoNegEnable  TRUE

 AutoNegBypassEnable  TRUE

 apEnable  TRUE

 ForceLinkDown  NOT SUPPORT

 ForcePeerDown  FALSE

 ForceLinkPass  FALSE

 SerdesTX  TRUE

 FecStatus(0-FEC/1-Disable/2-RS-FEC) 1

 RemFault NOT SUPPORT

 LocFault NOT SUPPORT

 invertTx TRUE, invertRx TRUE

[XX-B05-N05-OMS-ASW-6520-probe]serdes read 2 0 50 0 //重启侧的serdes信息

      ... …

***********Port Parameter********uiPhyPortNo[16]********

 SignalDetect  TRUE

 AutoNegEnable  TRUE

 AutoNegBypassEnable  TRUE

 apEnable  TRUE

 ForceLinkDown  NOT SUPPORT

 ForcePeerDown  FALSE

 ForceLinkPass  FALSE

 SerdesTX  FALSE

 FecStatus(0-FEC/1-Disable/2-RS-FEC) 0

 RemFault NOT SUPPORT

 LocFault NOT SUPPORT

 invertTx TRUE, invertRx TRUE

[XX-B05-N05-OMS-ASW-6520-probe]

4、  40G电缆是通过AP协商的,查看1/0/502/0/50的协商会话记录,可以发现2/0/50侧一直尝试去协商但是没有协商成功,2/0/50侧无协商相关日志,正常情况下有日志输出,因此判断是2/0/50侧协商异常。

input:10 1 3 cpssDxChPortApDebugInfoGet 1 16 /2/0/50AP协商信息

 Addr :0x70e78e90

Port Control Realtime Log

=========================

Num of log entries  415

Current entry index 1418

04739060: AP SM   Port 16, status 5 Tx Disable Success, O2(Tx Disable) 04739066: AP SM   Port 16, status 6 Resolution In Progress, O3(Resolution) 04743860: AP SM   Port 16, status 11 AP Resolution Timer Failure, O3(Resolution) 04743862: AP SM   Port 16, status 11 AP Resolution Timer Failure, O1(Init) 04743869: AP SM   Port 16, status 2 Init Success, O1(Init) 04743871: AP SM   Port 16, status 3 Tx Disable In Progress, O2(Tx Disable) 04743931: AP SM   Port 16, status 5 Tx Disable Success, O2(Tx Disable) 04743931: AP SM   Port 16, status 5 Tx Disable Success, O2(Tx Disable) 04743937: AP SM   Port 16, status 6 Resolution In Progress, O3(Resolution) 04748731: AP SM   Port 16, status 11 AP Resolution Timer Failure, O3(Resolution) 04748733: AP SM   Port 16, status 11 AP Resolution Timer Failure, O1(Init) 04748758: AP SM   Port 16, status 2 Init Success, O1(Init) 04748760: AP SM   Port 16, status 3 Tx Disable In Progress, O2(Tx Disable) 04748820: AP SM  

return value is: 00000000

 

10 1 3 cpssDxChPortApDebugInfoGet 0 16 //1/0/50侧协商异常信息。

 Addr :0x70e78e90

Port Control Realtime Log

=========================

Num of log entries  004

Current entry index 179

-258261135: Super   Port 16, AP, AP Status Msg Sent to execute, O2(Low Pri Msg)

-258261133: Super   Port 16, AP, AP Cfg Get Msg Sent to execute, O2(Low Pri Msg)

 

return value is: 00000000

5、  为了进一步验证是1/0/50协商异常的结论,将其shutdown/undo shutdown,这个动作会将协商重置。重置后恢复正常UP

[XX-B05-N05-OMS-ASW-6520-FortyGigE1/0/50]dis this

#

interface FortyGigE1/0/50

 description Link-irf-to-XX-B05-N05-OMS-ASW-6520-02:FG2/0/50

 shutdown

#

return

[XX-B05-N05-OMS-ASW-6520-FortyGigE1/0/50]undo shut

[XX-B05-N05-OMS-ASW-6520-FortyGigE1/0/50]

[XX-B05-N05-OMS-ASW-6520-FortyGigE1/0/50]pro

[XX-B05-N05-OMS-ASW-6520-probe]phy info 1 xq

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]  

 hg1 (20)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

 hg2 (16)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

[XX-B05-N05-OMS-ASW-6520-probe]phy info 2 xq

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]  

 hg1 (20)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

 hg2 (16)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -

[XX-B05-N05-OMS-ASW-6520-probe]

6、 通过代码逻辑分析,当AP状态机异常,在收到serdes信号变化时无法触发AP状态机迁移,就会导致AP协商异常。为了验证该结论,实验室进行测试,在AP状态机异常的情况下,复现出的故障现象与现场一致。

[XX-B05-N05-OMS-ASW-6520-probe]phy info 1 xq         //slot2重启后,1/0/49协商异常,无法up                          

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]     

 hg1 (20)  -   -    ena/  -  down/ -   40000/  -   FD/-   N/- FWD    CR4/ -    

 hg2 (16)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -    

[XX-B05-N05-OMS-ASW-6520-probe]phy info 2 xq                                   

     port addr name ena[i/e]  link[i/e] speed[i/e] du[i/e] an STP itf[i/e]     

 hg1 (20)  -   -    ena/  -  down/ -   40000/  -   FD/-   N/- FWD    CR4/ -     

 hg2 (16)  -   -    ena/  -    up/ -   40000/  -   FD/-   N/- FWD    CR4/ -    

[XX-B05-N05-OMS-ASW-6520-probe]                                                

XX-B05-N05-OMS-ASW-6520-probe]serdes read 1 0 49 0                                                                                 

... ...                                                                     

***********Port Parameter********uiPhyPortNo[20]********                                                                           

 SignalDetect  FALSE                            //异常侧signalDetectFALSE,与现场一致。                                                                                   

 AutoNegEnable  TRUE                                                                                                               

 AutoNegBypassEnable  TRUE                                                                                                          

 apEnable  TRUE                                                                                                                    

 ForceLinkDown  NOT SUPPORT                                                                                                         

 ForcePeerDown  FALSE                                                                                                              

 ForceLinkPass  FALSE                                                                                                               

 SerdesTX  TRUE                                                                                                                    

 FecStatus(0-FEC/1-Disable/2-RS-FEC) 1                                                                                              

 RemFault NOT SUPPORT                                                                                                              

 LocFault NOT SUPPORT                                                                                                               

 invertTx TRUE, invertRx TRUE                                                                                                      

[XX-B05-N05-OMS-ASW-6520-probe]serdes read 2 0 49 0                                                                                                                

... ...                                                                                                                                   

***********Port Parameter********uiPhyPortNo[20]********                                                                           

 SignalDetect  TRUE                        //重启侧signalDetectTURE,与现场一致。                                                           

 AutoNegEnable  TRUE                                                                                                               

 AutoNegBypassEnable  TRUE                                                                                                         

 apEnable  TRUE                                                                                                                    

 ForceLinkDown  NOT SUPPORT                                                                                                         

 ForcePeerDown  FALSE                                                                                                              

 ForceLinkPass  FALSE                                                                                                              

 SerdesTX  FALSE                                                                                                                    

 FecStatus(0-FEC/1-Disable/2-RS-FEC) 0                                                                                             

 RemFault NOT SUPPORT                                                                                                               

 LocFault NOT SUPPORT                                                                                                              

 invertTx TRUE, invertRx TRUE                                                                                                       

[XX-B05-N05-OMS-ASW-6520-probe]              

解决方法

通过以上问题分析可以确认:

1S6520X设备使用40G电缆进行AP协商时,因AP状态机迁移异常导致堆叠口无法UP,后续将通过软件版本修复。

240G光模块UP走的是RxTraing训练方式,不走AP协商流程,可临时选择使用40G光模块规避问题。

该案例对您是否有帮助:

您的评价:1

若您有关于案例的建议,请反馈:

0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作