cron 运行脚本时的环境变量

2024-11-01 08:41:00
admin
原创
189
摘要:问题描述:我有一个使用环境变量的 Python 脚本。此脚本在直接运行时完全按照计划运行;但是,我暂时想将其作为 cron 作业每分钟运行一次。当前在我的cron.目录中有一个名为的文件,scrapers其中包含:* * * * * root /usr/bin/python3.5 /code/scraper....

问题描述:

我有一个使用环境变量的 Python 脚本。此脚本在直接运行时完全按照计划运行;但是,我暂时想将其作为 cron 作业每分钟运行一次。

当前在我的cron.目录中有一个名为的文件,scrapers其中包含:

* * * * * root /usr/bin/python3.5 /code/scraper.py

这将运行 Python 脚本,但脚本失败,因为在脚本中我使用了两个环境变量。

我读到我应该添加SHELL=/bin/bash到 cron 文件中,所以我这样做了,但这没有帮助。

SHELL=/bin/bash
* * * * * root /usr/bin/python3.5 /code/scraper.py

然后我读

在 crontab 中,在命令之前添加. $HOME/.profile

SHELL=/bin/bash
* * * * * . $HOME/.profile; root /usr/bin/python3.5 /code/scraper.py

但这导致 cron 完全停止运行。将环境变量“发送”到 cron 的最佳方法是什么?


解决方案 1:

我不会执行整个操作,而是移动必须在您的作业和具有配置文件的帐户~/.profile之间共享的变量,然后我会在 cron 作业中获取这些变量。cron`~/.profile`

您在问题中展示的最后一次尝试格式不正确。用户 ID 应该紧跟在调度信息之后,但您在用户 ID 之前添加了个人资料的来源,这肯定行不通。

这是我在此处测试过的示例设置:

*/1 * * * * someuser . /tmp/t10/setenv && /usr/bin/python /tmp/t10/test.py

为了测试目的,我将其设置为每分钟执行一次。请someuser用一些有意义的东西替换它。/tmp/t10/setenv我使用的脚本是这样的:

export FOO=foovalue
export BAR=barvalue

/tmp/t10/test.py文件有以下内容:

import os

print os.environ["FOO"], os.environ["BAR"]

我的 cron 通过电子邮件向我发送其运行的脚本的输出。我收到了一封包含以下输出的电子邮件:

foovalue barvalue

解决方案 2:

您可以内联设置环境变量:

* * * * * root ENV_VAR=VALUE /usr/bin/python3.5 /code/scraper.py

另一种方法是使用honcho,您可以传递包含环境变量的文件。

honcho -e /path/to/.env run /code/scraper.py

解决方案 3:

您可以将其添加到 crontab 的顶部,并使其不受版本控制。假设导致您遇到困难的环境变量是export DJANGO_SECRET_KEY="FOOBAR_1241243124312341234"

定时任务

DJANGO_SECRET_KEY="FOOBAR_1241243124312341234"

SCRIPT_NAME = my_cool_script
20 21 * * 1-5 bash ~/git_repo/cronjobs/$SCRIPT_NAME.sh 2&>1 | tee ~/git_repo/cronjobs/logs/$SCRIPT_NAME.log

我的_cool_脚本

#!/usr/bin/env bash
~/anaconda3/envs/django/bin/python ~/git_repo/django_project/manage.py run_command

当所讨论的环境变量需要保密,并且现有 .bashrc 的加载由于某种原因无法正常进行时,这对我来说很有效。

解决方案 4:

您可以通过以下方式指定两个环境变量:

* * * * * root env A=1 B=2 /usr/bin/python3.5 /code/scraper.py

env是一个使用附加变量运行指定程序的系统程序:

$ env A=1 B=2 /bin/sh -c 'echo $A$B'  # or just 'sh': would search in $PATH
12

解决方案 5:

这是我喜欢的方法之一,编写一个脚本来设置环境并以脚本的参数作为参数执行该脚本

设置环境变量到进程

#!/usr/bin/env bash
echo "TEST_VAR before export is: <$TEST_VAR>"

export TEST_VAR=/opt/loca/netcdf
echo "TEST_VAR after export is: <$TEST_VAR>"
export PATH=$PATH:/usr/bin/python3.5
export PYTHTONPATH=$PYTHONPATH:/my/installed/pythonpath

# execute command and its parameters as input for this script
if [ $# -eq 0 ]; then
    echo "No command to execute"
else
    echo "Execute commands with its parameters: $@"
    eval $@
fi

用法

/usr/bin/python3.5 /code/scraper.py被作为set_env_to_process.sh
set_env_to_process.sh设置脚本运行正确环境的输入

它可以用作命令行、cron、sudo、ssh 来设置环境

 * * * * * root set_env_to_process.sh /usr/bin/python3.5 /code/scraper.py
相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用