• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

M9008-S设备丢包问题经验案例

  • 0关注
  • 1收藏 1732浏览
粉丝:2人 关注:0人

组网及说明

M9008-S做出口设备


问题描述

现场反馈使用内网终端在ping这台M9K设备的内网口或ping外网DNS地址时,都会出现不同程度的丢包,丢包率在1%-5%之间浮动,使现场用户在使用业务时感受到了卡顿现象。


过程分析

自动化部署

建议现场ping设备内网口2/0/25固定个数的报文,根据ping操作记录和流量统计结果显示,M9K设备inbound方向接收到了300个报文,outbound方向回复了295个报文,确认报文是丢在了M9K上:

自动化部署 自动化部署


自动化部署


查看设备CPU及内存都在正常范围内:

===============display cpu===============

Slot 0 CPU 0 CPU usage:

    5% in last 5 seconds

    2% in last 1 minute

    3% in last 5 minutes

Slot 2 CPU 0 CPU usage:

    11% in last 5 seconds

    11% in last 1 minute

    11% in last 5 minutes

Slot 3 CPU 0 CPU usage:

    7% in last 5 seconds

    7% in last 1 minute

    7% in last 5 minutes

Slot 3 CPU 1 CPU usage:

    8% in last 5 seconds

    7% in last 1 minute

    8% in last 5 minutes

===============display memory=============== 

Memory statistics are measured in KB:

Slot 0:

             Total      Used      Free    Shared   Buffers    Cached   FreeRatio

Mem:       4043532   1212768   2830764         0      2380    240944       71.5%

-/+ Buffers/Cache:    969444   3074088

Swap:           0         0         0

 

Slot 2:

             Total      Used      Free    Shared   Buffers    Cached   FreeRatio

Mem:        999872    287976    711896         0         0     26220       71.3%

-/+ Buffers/Cache:    261756    738116

Swap:           0         0         0

 

Slot 3:

             Total      Used      Free    Shared   Buffers    Cached   FreeRatio

Mem:        999872    287696    712176         0         0     26216       71.4%

-/+ Buffers/Cache:    261480    738392

Swap:           0         0         0


Slot 3 CPU 1:

             Total      Used      Free    Shared   Buffers    Cached   FreeRatio

Mem:      16412828   6526272   9886556         0      2780    673224       62.9%

-/+ Buffers/Cache:   5850268  10562560

Swap:           0         0         0


且流量是从内网口进入的,查看配置内网口上及设备本身未做什么特殊配置

后续在排查中发现,M9K的内网口2/0/25对应的slot3,通过display process cpu slot 3 cpu 1命令发现了单核被打满的情况:

501      0.0%      0.0%      0.1%    [kdrvdp38]

502      2.3%      2.3%      0.1%    [kdrvdp39]

503      0.1%      0.1%      0.1%    [kdrvdp40]

504      2.3%      0.0%      0.1%    [kdrvdp41]

该插卡型号为NSQM2FWDSCA0,为防火墙业务单板,该单板共有48核,如上信息显示39和41两个单核已经达到了2.3%的cpu使用率,即单核已经被打满,怀疑是单核被打满导致丢包现象的产生

让现场通过 display session top-statistics命令查看会话统计,观察近期是否有异常的较大流量的会话产生,现场观察后反馈没有异常的会话流量


解决方法


目前观察怀疑就是瞬间单条流量较大,导致单核打满,加上现场的会话非异常会话,所以建议现场将逐流转发更改为逐包转发观察测试。

逐包转发在系统视图下进行配置

forwarding policy { per-flow  | per-packet }

更改为逐包转发后,现场单核的cpu使用率降到0.5%左右。改为逐包转发后,单核打满的现象会很少出现,除非流量特别大,达到了设备的性能阈值,每个核都被打满 。 自动化部署 逐包转发下,会出现乱序的可能,但是对普通上网业务基本没啥影响。


该案例对您是否有帮助:

您的评价:1

若您有关于案例的建议,请反馈:

0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作