Pet*_*etr 5 linux memory memory-management
我一直在观看编程中的一些奇怪的现象已经有一段时间了,因为在Linux系统上默认启用了overcommit.
在我看来,几乎每个高级应用程序(例如,用Java,Python或C#等高级编程语言编写的应用程序,包括用C++编写的一些使用大型库(如Qt)的桌面应用程序)都会使用大量的虚拟操作内存.例如,Web浏览器在使用仅300MB的RAM时分配20GB的内存是正常的.或者对于dektop环境,mysql服务器,几乎每个java或单声道应用程序等,都要分配数十GB的RAM.
为什么会这样?有什么意义?这有什么好处吗?
我注意到当我在linux中禁用overcommit时,如果桌面系统实际上运行了很多这些应用程序,系统就会变得无法使用,因为它甚至无法正常启动.
在虚拟机内运行代码的语言(例如 Java (*)、C# 或 Python)通常会在启动时分配大量(虚拟)内存。其中一部分对于虚拟机本身来说是必需的,一部分是预先分配给虚拟机内的应用程序的。
对于在操作系统直接控制下执行的语言(例如 C 或 C++),这是不必要的。您可以编写仅动态使用其实际需要的内存量的应用程序。然而,一些应用程序/框架仍然以这样的方式设计:它们向操作系统请求一次大块内存,然后自己管理内存,希望比操作系统更高效。
这有一些问题:
它不一定更快。大多数操作系统对于如何管理内存已经相当智能。优化规则#1,测量,优化,测量。
并非所有操作系统都有虚拟内存。有一些非常有能力的应用程序无法运行那些如此“粗心”的应用程序,假设您可以毫无问题地分配大量“非真实”内存。
您已经发现,如果您将操作系统从“慷慨”改为“严格”,这些内存消耗者就会彻底失败。;-)
(*) 例如,Java一旦启动就无法扩展其VM。您必须将虚拟机的最大大小作为参数给出 ( -Xmxn)。“安全总比后悔好”的想法会导致某些人/应用程序严重过度分配。