管道在 Linux 中如何工作?

2024-11-13 08:36:00
admin
原创
160
摘要:问题描述:管道如何工作?如果我通过 CLI 运行程序并将输出重定向到文件,我是否可以在写入文件时将该文件通过管道传输到另一个程序中? 基本上,当将一行写入文件时,我希望它立即通过管道传输到我的第二个应用程序(我正在尝试从现有程序中动态绘制图形)。只是不确定管道是否在继续执行下一个命令之前完成了第一个命令。如有...

问题描述:

管道如何工作?如果我通过 CLI 运行程序并将输出重定向到文件,我是否可以在写入文件时将该文件通过管道传输到另一个程序中?

基本上,当将一行写入文件时,我希望它立即通过管道传输到我的第二个应用程序(我正在尝试从现有程序中动态绘制图形)。只是不确定管道是否在继续执行下一个命令之前完成了第一个命令。

如有任何反馈,我们将不胜感激!


解决方案 1:

如果要将一个程序的输出重定向到另一个程序的输入,只需使用一个简单的管道:

program1 arg arg | program2 arg arg

如果要将的输出保存program1到文件中通过管道传输到program2,则可以使用tee(1)

program1 arg arg | tee output-file | program2 arg arg

管道中的所有程序都同时运行。大多数程序通常使用阻塞I/O:如果当它们尝试读取输入时没有输入,它们就会阻塞:即它们停止,操作系统取消调度它们运行,直到有更多输入可用(以避免耗尽 CPU)。同样,如果管道中较早的程序写入数据的速度比后面的程序读取数据的速度快,最终管道的缓冲区会填满,写入器会阻塞:操作系统取消调度,直到管道的缓冲区被读取器清空,然后它可以继续再次写入。


编辑

如果要使用的输出program1作为命令行参数,可以使用反引号或$()语法:

# Runs "program1 arg", and uses the output as the command-line arguments for
# program2
program2 `program1 arg`

# Same as above
program2 $(program1 arg)

应该优先考虑这种$()语法,因为它们更清晰,并且可以嵌套。

解决方案 2:

管道在运行第二个命令之前不会完成第一个命令。Unix(和 Linux)管道同时运行所有命令。如果出现以下情况,命令将被暂停:

  • 它极度渴求输入。

  • 它的产量远远超过了其后继者准备消费的产量。

对于大多数程序来说,输出都是经过缓冲的,这意味着操作系统会积累大量的输出(可能是 8000 个字符左右),然后再将其传递到管道的下一阶段。这种缓冲用于避免在进程和内核之间来回切换过多。

如果您希望立即发送管道上的输出,则可以使用无缓冲I/O,这在 C 语言中意味着调用类似的东西fflush()以确保任何缓冲输出都会立即发送到下一个进程。无缓冲输入也是可能的,但通常是不必要的,因为缺乏输入的进程通常不会等待缓冲区满了,而是会处理您能得到的任何输入。

对于典型的应用程序,不推荐使用无缓冲输出;通常使用默认值可以获得最佳性能。但是,对于您的情况,您希望在第一个进程有可用信息时立即进行动态绘图,您肯定希望使用无缓冲输出。如果您使用 C,fflush(stdout)则在需要发送输出时调用就足够了。

解决方案 3:

stdin如果您的程序使用和进行通信stdout,请确保您fflush(stdout)在写入后调用或找到某种方法来禁用标准 IO 缓冲。我能想到的真正描述如何在 C/C++ 中最佳实现管道的最佳参考资料是UNIX 环境中的高级编程或UNIX 网络编程:第 2 卷。您也可以从这篇文章开始。

解决方案 4:

如果您的两个程序坚持读取和写入文件并且不使用 stdin/stdout,您可能会发现可以使用命名管道而不是文件。

使用 mknod(1) 命令创建命名管道:

$ mknod /tmp/named-pipe p

然后配置您的程序以读取和写入 /tmp/named-pipe(使用您认为合适的任何路径/名称)。

在这种情况下,两个程序将并行运行,当管道变满/空时根据需要进行阻塞,如其他答案中所述。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用