现场工程师出手--虚拟化软件预留内存过大导致其他程序崩溃问题

项目场景:

一位学生有一台笔记本电脑,安装了Android,Kafka虚拟机很多软件。笔记本配置了20GB内存,固态硬盘,但最近很卡,Android Stuido经常闪退,一些游戏也无法运行。


问题描述

由于Android Studio是很耗内存的软件,首先想到观察内存,发现可用内存不足5%,资源监视器大量“硬中断”报警,说明存在大量的内存分配失败。同时页面缓存也涨到快10GB,更说明是内存不够了。这直接导致开启一些大型3D游戏时卡顿(大量的Page交换),安卓仿真器崩溃。使用进程工具统计所有进程的内存,发现总共才占了6GB不到,那另外12GB内存是谁占用了?


原因分析:

考虑到同学启动了一个debain的虚拟机作为一个本地服务器,测试一些新版本Kafka的功能。会不会是虚拟机的问题呢? 同学也说本来以为是的,但是把虚拟机的内存从8G下降到2GB,还是会内存爆满。

在现场,我再次终止虚拟机后,内存果然全部释放干净了。但这个虚拟机总共才2GB的内存配置,怎么可能占用如此多的内存呢?

我们试着复现现象:

  1. 重启笔记本,不启动虚拟机时,一切正常。
  2. 启动虚拟机,开启数据吞吐测试程序。这个程序会不断从虚拟机内存里吞吐大量的数据。
  3. 资源管理器发现内存缓慢涨大,并轻松突破了2GB的限制,持续膨胀。
  4. 最终内存全部用光,故障浮现。

这难道是虚拟机本身有内存泄露?由于几次测试,观察到除了正常的系统占用,内存增量基本是16GB左右就不再涨大,狐疑这个16GB是怎么回事。如果是软件故障,应该不会有上限,至少应该把页面文件都撑爆了再退出。但这个现象是由虚拟机占用的内存到达16GB就停止增长了。此时,若不运行别的软件,系统还是正常的。

抱着试一试的态度,在虚拟机设置页面瞎点,改了一堆参数,也没有用。结果,即将黔驴技穷的时候,在虚拟机的“全局配置”选项菜单里,有一个“预留内存”的选项,恰好是16GB多。

把这个预留内存下移到4GB,问题解决。


解决方案:

“预留内存”只要比虚拟机的配置内存大就行了。像同学开1个2GB的Debain,设置个4GB足够了。

可能技术背景解释

不是很熟悉这款软件,但有个猜测:

  1. 这个“预留内存”应该是指由虚拟机统管的全部内存。
  2. 虽然客户OS只有 2GB内存,但因为IO频繁,虚拟机软件为避免碎片化,会用所有的16GB预留内存来周转数据。
  3. 增长期,随着频繁的IO,内存不断涨大。2GB客户机里的new每次都在宿主的这16GB缓存的尾部新增长,而不是重用2GB的空间。
  4. 稳定期,16GB空间用完,回到头部去找新的空闲位置。

原理上图中,虽然蓝色的虚拟机2GB内存大小不变,但是在虚拟机预留内存中的位置却时刻变化,并逐步遍历了所有的预留内存。因此,这个“预留内存”如果不是专门用来跑虚机的电脑,千万不要设置太大。如果要吃鸡或者GTA,应该非常谨慎地设置内存。

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-05-11 19:02:07       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-05-11 19:02:07       100 阅读
  3. 在Django里面运行非项目文件

    2024-05-11 19:02:07       82 阅读
  4. Python语言-面向对象

    2024-05-11 19:02:07       91 阅读

热门阅读

  1. SpringBoot 中检测文件编码格式

    2024-05-11 19:02:07       35 阅读
  2. SpringBoot 中 zip 文件解压工具类

    2024-05-11 19:02:07       31 阅读
  3. 【Python】如何训练模型并保存本地和加载模型

    2024-05-11 19:02:07       35 阅读
  4. 计算机答辩常见问题汇总(一)

    2024-05-11 19:02:07       33 阅读
  5. 蒙特卡洛求PI(抛点法)TypeScript实现

    2024-05-11 19:02:07       31 阅读
  6. 第十周笔记

    2024-05-11 19:02:07       35 阅读
  7. WHAT - npm和npx

    2024-05-11 19:02:07       30 阅读
  8. 【LeetCode】每日一题:2960. 统计已测试设备

    2024-05-11 19:02:07       30 阅读