• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

MCX6网卡单机双向打流测试性能无法到达200G理论性能

  • 0关注
  • 0收藏 330浏览
粉丝:0人 关注:0人

组网及说明

服务器:4500 G6(问题与服务器型号关系不大)
网卡型号:IB-MCX653105A-HDAT-200Gb-1P

告警信息

使用ib write bw -d mlx5 2--report gbits -D1 --run infinitely 127.0.0.1命令,对网卡进行本地地址打流性能测试
友商同样mcx的200 G网卡可达到200G的理论性能,此台服务器性能只能达到185G左右。

问题描述

对比友商和我司的硬件配置差异CPU存在差异,网卡型号有差异
此外网卡正常两台服务器直连打流测试达到90%的理论性能一般来说是正常的。
但是该命令是测本地回环地址,更依赖于本地内核等性能。

过程分析

通过更换友商同款5520CPU,以及6330,5380,5420型号CPU问题未解决,通过关闭核心提升单核睿频的方式性能甚至有下降。
后续对比网卡固件参数设置发现正常服务器和服务器中存在MAX_ACC_OUT_READ参数差异,正常服务器为44,性能低的服务器为32。

而NV官网也对此MXC6网卡的调优有一定指导,推荐去其从默认32设置为44;原文链接***.***/grace-perf-tuning-guide/optimizing-io.html

修改该参数后可达到200G以上的性能



解决方法

设置参数方式;在系统下使用
1. sudo mlxconfig -d <dev> query | grep MAX_ACC_OUT_READ-----查看该参数是否开启,默认值是多少
2. sudo mlxconfig -d <dev> set ADVANCED_PCI_SETTINGS=1   -----若没有此参数使用该命令将参数添加上
3.sudo mlxconfig -d <dev> set MAX_ACC_OUT_READ=<value>-----设置参数数值

注意:该参数需要重启才能生效。

该案例对您是否有帮助:

您的评价:1

若您有关于案例的建议,请反馈:

0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 pub.zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作