强制 free() 将 malloc 内存返回给操作系统

2024-10-24 08:50:00
admin
原创
280
摘要:问题描述:似乎即使我释放了由分配的 Linux 进程的所有内存malloc(),内存仍然为该进程保留,而不会返回给操作系统。valgrind massif默认运行工具未发现任何泄漏。运行valgrind结果--pages-as-heap=yes显示了这一点:->13.77% (7,655,424B) 0...

问题描述:

似乎即使我释放了由分配的 Linux 进程的所有内存malloc(),内存仍然为该进程保留,而不会返回给操作系统。

valgrind massif默认运行工具未发现任何泄漏。

运行valgrind结果--pages-as-heap=yes显示了这一点:

->13.77% (7,655,424B) 0x35FEEEB069: brk (brk.c:31)

->13.77% (7,655,424B) 0x35FEEEB113:sbrk (sbrk.c:53)

->13.77% (7,655,424B) 0x35FEE82717: __default_morecore (morecore.c:48)

->13.77% (7,655,424B) 0x35FEE7DCCB: _int_malloc (malloc.c:2455)

->13.77% (7,655,424B) 0x35FEE7F4F1: malloc (malloc.c:2862)

因此,即使内存已被释放free(),但似乎malloc调用了brk/sbrk并没有将其返回给操作系统。

我如何强制立即free()调用sbrk()并将所有内存返回给操作系统?

我正在一个非常低端的平台上运行,每个 MB 都很重要。

提前致谢。


解决方案 1:

使用 glibc malloc 尝试调用malloc_trim函数。它没有很好的文档记录,并且在 2007 年左右(glibc 2.9)内部发生了变化 - https://stackoverflow.com/a/42281428

自 2007 年以来,此功能将:遍历所有 malloc 内存区域(用于多线程应用程序)进行修剪和 fastbin 合并;并完全释放所有对齐的(4KB)页面。

https://sourceware.org/git/?p=glibc.git;a=commit;f=malloc/malloc.c;h=68631c8eb92ff38d9da1ae34f6aa048539b199cc

Ulrich Drepper 2007 年 12 月 16 日星期日 22:53:08 +0000(22:53 +0000)

  • malloc/malloc.c (public_mTRIm):遍历所有领域并对所有领域调用 mTRIm。

(mTRIm):另外迭代所有空闲块并使用 madvise 释放所有包含至少一个内存页的块的内存。

https://sourceware.org/git/?p=glibc.git;a=blobdiff;f=malloc/malloc.c;h=c54c203cbf1f024e72493546221305b4fd5729b7;hp=1e716089a2b976d120c304ad75dd95c63737ad75;hb=68 631c8eb92ff38d9da1ae34f6aa048539b199cc;hpb=52386be756e113f20502f181d780aecc38cbb66a

+  malloc_consolidate (av);
...
+  for (int i = 1; i < NBINS; ++i)
...
+        for (mchunkptr p = last (bin); p != bin; p = p->bk)
+         {
...
+               /* See whether the chunk contains at least one unused page.  */
+               char *paligned_mem = (char *) (((uintptr_t) p
+                                               + sizeof (struct malloc_chunk)
+                                               + psm1) & ~psm1);
...
+               /* This is the size we could potentially free.  */
+               size -= paligned_mem - (char *) p;
+
+               if (size > psm1)
+                 {
...
+                   madvise (paligned_mem, size & ~psm1, MADV_DONTNEED);

因此,调用malloc_trim会将几乎所有释放的内存释放回操作系统。只有包含仍未释放的数据的页面才会被保留;当使用 MADV_DONTNEED 进行 madvised 时,操作系统可能会取消映射或不取消映射物理页面,而 Linux 通常会取消映射。madvised 页面仍计入 VSIZE(进程的总虚拟内存大小),但通常有助于减少 RSS(进程使用的物理内存量)。

或者,您可以尝试切换到替代的 malloc 库:tcmalloc(gperftools / google-perftools)或 jemalloc(facebook),它们都具有将释放的内存返回给操作系统的严格规则(使用 madvise MADV_DONTNEED 甚至MADV_FREE)。

解决方案 2:

让操作系统回收内存的唯一可靠且可移植的方法是退出该进程并重新启动它,恢复继续所需的任何状态。

当然,根据您的需要使用 brk/sbrk 编写自己的 malloc/free 实现是另一种选择。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用