在Linux下限制R的内存使用量

2024-11-11 08:27:00
admin
原创
20
摘要:问题描述:我们在 Linux 集群环境中运行 R。当用户无意中使用 R 进程占用所有内存时,头节点会出现几次挂起。有没有办法在 Linux 下限制 R 内存使用量?我宁愿不建议使用全局 ulimit,但这可能是唯一的出路。解决方案 1:它允许使用与shell 中相同的机制为正在运行的 R 进程设置内存限制。不...

问题描述:

我们在 Linux 集群环境中运行 R。当用户无意中使用 R 进程占用所有内存时,头节点会出现几次挂起。有没有办法在 Linux 下限制 R 内存使用量?我宁愿不建议使用全局 ulimit,但这可能是唯一的出路。


解决方案 1:

它允许使用与shell 中相同的机制为正在运行的 R 进程设置内存限制。不支持unix::rlimit_as()Windows和macOS 。ulimit

在我的.Rprofile我有

unix::rlimit_as(1e12, 1e12)

将内存使用量限制为~12 GB。

在此之前...

我创建了一个ulimit具有类似功能的小型 R 包。

使用以下方式从 GitHub 安装

devtools::install_github("krlmlr/ulimit")

要将 R 可用的内存限制为 2000 MiB,请调用:

ulimit::memory_limit(2000)

现在:

> rep(0L, 1e9)
Error: cannot allocate vector of size 3.7 Gb

解决方案 2:

?"Memory-limits"建议使用ulimitlimit

有一个命令行标志:--max-mem-size可以设置初始限制。用户可以在会话期间使用 来增加该限制memory.limit

相关推荐
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   601  
  华为IPD与传统研发模式的8大差异在快速变化的商业环境中,产品研发模式的选择直接决定了企业的市场响应速度和竞争力。华为作为全球领先的通信技术解决方案供应商,其成功在很大程度上得益于对产品研发模式的持续创新。华为引入并深度定制的集成产品开发(IPD)体系,相较于传统的研发模式,展现出了显著的差异和优势。本文将详细探讨华为...
IPD流程是谁发明的   7  
  如何通过IPD流程缩短产品上市时间?在快速变化的市场环境中,产品上市时间成为企业竞争力的关键因素之一。集成产品开发(IPD, Integrated Product Development)作为一种先进的产品研发管理方法,通过其结构化的流程设计和跨部门协作机制,显著缩短了产品上市时间,提高了市场响应速度。本文将深入探讨如...
华为IPD流程   9  
  在项目管理领域,IPD(Integrated Product Development,集成产品开发)流程图是连接创意、设计与市场成功的桥梁。它不仅是一个视觉工具,更是一种战略思维方式的体现,帮助团队高效协同,确保产品按时、按质、按量推向市场。尽管IPD流程图可能初看之下显得错综复杂,但只需掌握几个关键点,你便能轻松驾驭...
IPD开发流程管理   8  
  在项目管理领域,集成产品开发(IPD)流程被视为提升产品上市速度、增强团队协作与创新能力的重要工具。然而,尽管IPD流程拥有诸多优势,其实施过程中仍可能遭遇多种挑战,导致项目失败。本文旨在深入探讨八个常见的IPD流程失败原因,并提出相应的解决方法,以帮助项目管理者规避风险,确保项目成功。缺乏明确的项目目标与战略对齐IP...
IPD流程图   8  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用