UIS虚拟机定时发生故障重启

UISE0720，有一台虚拟机每天五点半左右发生故障重启。

1、确认同主机其他虚机未发生相同现象，检查/var/log/libvirt/qemu下的虚拟机日志发现虚机被异常shutdown，原因为crash。

2、检查对应主机日志发现同一时间点，虚拟机进程使用内存触发cgroup阈值，进程被异常kill。

3、确认该节点为超融合节点，检查/etc/cgconfig.conf文件。

经确认，现场在该时间段虚机内有一批量任务执行会导致虚机使用的内存上升，现场该主机上所有虚机内存总和为208G，超出cgroup阈值。Cgourp触发是根据虚拟机kvm进程实际使用的物理内存来计算的。 由于kvm进程本身也需要消耗资源，所以一般虚拟机kvm进程会比虚拟机内部显示使用内存大。 所以在配置内存时候还要考虑预留一部分内存，不然容易导致虚拟机被随机kill掉。

1、给该主机扩充内存；

2、将该内存大的虚拟机迁移到其他内存充足的主机上。