Linux 乐观 malloc:当内存不足时,new 总会抛出吗?

2024-11-04 08:42:00
admin
原创
180
摘要:问题描述:我一直在阅读有关 Linux 上内存不足的情况,手册页中的以下段落引起了我的思考:默认情况下,Linux 遵循乐观内存分配策略。这意味着当 malloc() 返回非 NULL 时,无法保证内存确实可用。这是一个非常严重的错误。如果系统内存不足,一个或多个进程将被臭名昭著的 OOM 杀手杀死。[......

问题描述:

我一直在阅读有关 Linux 上内存不足的情况,手册页中的以下段落引起了我的思考:

默认情况下,Linux 遵循乐观内存分配策略。这意味着当 malloc() 返回非 NULL 时,无法保证内存确实可用。这是一个非常严重的错误。如果系统内存不足,一个或多个进程将被臭名昭著的 OOM 杀手杀死。[...]

考虑到运算符 new 实现最终会在某个时候调用 malloc,是否有任何保证表明 new 确实会在 Linux 上抛出错误?如果没有,如何处理这种显然无法检测到的错误情况?


解决方案 1:

这取决于情况;您可以使用 vm.overcommit_memory 配置内核的过度提交设置。

几年前,Herb Sutter 讨论过这种行为实际上不符合 C++ 标准:

“在某些操作系统上,特别是 Linux,内存分配总是会成功。句号。即使请求的内存实际上不可用,分配怎么可能总是成功?原因是分配本身仅记录对内存的请求;在幕后,(物理或虚拟)内存实际上并没有提交给请求进程,也没有真正的后备存储,直到内存被实际使用。

“请注意,如果 new 直接使用操作系统的功能,那么 new 将始终成功,但任何后续的无害代码(如 buf[100] = 'c';)都可能抛出异常、失败或停止。从标准 C++ 的角度来看,这两种效果都是不符合要求的,因为 C++ 标准要求,如果 new 无法提交足够的内存,它就必须失败(但这并不会发生),并且像 buf[100] = 'c' 这样的代码不应抛出异常或以其他方式失败(这可能会发生)。”

解决方案 2:

简单来说,你无法通过软件来处理它。

对于您的应用程序,您将收到一个完全有效的指针。一旦您尝试访问它,它将在内核中生成页面错误,内核将尝试为其分配物理页面,如果不能...就完了。

但正如您所看到的,所有这些都发生在内核中,您的应用程序无法看到。如果这是一个关键系统,您可以在系统上完全禁用过量提交。

解决方案 3:

我认为 malloc 仍然可以返回 NULL。原因是系统可用内存(RAM + swap)与进程地址空间中的数量存在差异。

例如,如果您在标准 x86 Linux 上从 malloc 申请 3GB 内存,它肯定会返回 NULL,因为考虑到分配给用户空间应用程序的内存量,这是不可能的。

解决方案 4:

如果我错了请原谅我,但尝试将分配的内存清零是否足以保证您拥有所请求的每个字节?或者即使只是写入最后一个字节,如果内存不是您的,它也会引发异常,对吗?

如果这是真的,您可以尝试写入内存的最后一个(和第一个?)字节,看看它是否正常工作,如果不行,您可以从 malloc 返回 null。

解决方案 5:

是的,有一点可以保证,new 最终会抛出异常。无论是否过度使用,地址空间都是有限的。因此,如果你继续分配内存,迟早会用尽地址空间,new 将被迫抛出异常。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用