CAS 虚拟机网络延迟较高

不涉及

  现场CAS环境中所有虚拟机都存在网络延迟高的现象，通过排查发现有某几台虚拟机使用量比较大，业务量相对较大，网络延迟感知比较明显，虚拟机卡顿明显，重点对这几台虚拟机进行了相关排查。

通过排查这几台虚拟机发现：

1）  cvk主机ping该虚拟机网络延迟较高，经常出现延迟几百毫秒；

2）  本地pc机ping该虚拟机网络延迟较高，延迟几百毫秒；

3）  Cvk主机ping虚拟机和本地pc机ping虚拟机延迟现象同时出现；

4）  Pc机ping该cvk主机正常；

5）  虚拟机ping其他虚拟机延迟也较高。

初步定为是虚拟机内部原因导致。

  首先排查网络侧问题：由于cvk主机 ping 该虚拟机出现延迟高，应该是虚拟机内部的问题，内部转发一般不可能高延迟，除非是丢包。推断可能跟虚拟机内部的性能及存储有关。

     然后排查了虚拟机内部性能，排查结果如下：

  通过查看虚拟机的性能，发现虚拟机磁盘I/O延迟存在一定的波动现象，主机后台查看存储性能。

通过CVK主机后台查看虚拟机的存储性能，发现Iostat查看到%util波动较大，有时达到了100%。收集CAS测日志发现，现场环境所有的主机都存在I/O延迟较高的现象（下图仅为其中两台CVK主机，其他所有主机相同）。

  综上分析，判定是存储侧出现问题，导致存储I/O慢，使得系统内部发生卡顿，从而导致网络延迟。

  联系存储测排查存储测故障问题，最后发现是由于现场设备搬迁，FC交换机端口光纤线插乱，导致主机访问存储出现异常情况，重新整改后问题解决。