管道缓冲区大小是 4k 还是 64k?

2024-10-25 08:42:00
admin
原创
323
摘要:问题描述:我在多个地方看到,管道的默认缓冲区大小是 4kB(例如,这里),并且我ulimit -a倾向于证实该说法:$ ulimit -a core file size (blocks, -c) 0 data seg size (kbytes, -d) unlimited...

问题描述:

我在多个地方看到,管道的默认缓冲区大小是 4kB(例如,这里),并且我ulimit -a倾向于证实该说法:

$ ulimit -a
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 15923
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 1024
pipe size            (512 bytes, -p) 8 // 8 * 512B = 4kB
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 10240
cpu time               (seconds, -t) unlimited
max user processes              (-u) 1024
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

但是当我使用一个小程序来测试缓冲区大小(通过写入管道直到 write() 阻塞)时,我看到 64kB 的限制!

参见这个程序:

#include <stdio.h>
#include <unistd.h>
#include <limits.h>

int main(void)
{
    int tube[2];
    char c = 'c';
    int i;

    fprintf(stdout, "Tube Creation
");
    fprintf(stdout, "Theoretical max size: %d
", PIPE_BUF);
    if( pipe(tube) != 0)
    {
        perror("pipe");
        _exit(1);
    }
    fprintf(stdout, "Writing in pipe
");
    for(i=0;; i++)
    {
        fprintf(stdout, "%d bytes written
", i+1);
        if( write(tube[1], &c, 1) != 1)
        {
            perror("Write");
            _exit(1);
        }
    }
    return 0;
}

其输出如下:

$ ./test_buf_pipe 
Tube Creation
Theoretical max size: 4096
Writing in pipe
1 bytes written
2 bytes written
3 bytes written
4 bytes written
[...]
65535 bytes written
[blocks here]

强烈暗示管道缓冲区大小实际上是 64k!这里发生了什么??


解决方案 1:

其他答案告诉您管道大小为 64 KB。 PIPE_BUF 为 4KB 的原因是 PIPE_BUF 是保证写入是原子的最大大小。 请参阅http://pubs.opengroup.org/onlinepubs/9699919799/functions/write.html

解决方案 2:

现在可以编程了


从 Linux 2.6.35 开始,您可以使用fcntl(2)F_SETPIPE_SZ操作将管道缓冲区设置为/proc/sys/fs/pipe-max-size。默认情况下为 1 MB;请参阅proc(5)。

解决方案 3:

根据我的经验,单次写入测试产生的总大小为 65536,但当我一次写入 2700 时,我只能写入 16 次,然后下一次尝试就会停滞。我认为“原子”写入需要在一个 4K 块内,并且对于我的每次写入,它都会转到下一个完整块来满足请求。因此,实际上,可用的管道大小取决于写入的大小。

解决方案 4:

看起来内核使用了最多 16 个缓冲区,总计 64k。请参阅此链接以了解 ulimit 输出与实际缓冲区大小的解释

解决方案 5:

是的。从 2.6.11 内核开始, Linux 中的管道大小为 64kB。为什么 ulimit 会将其报告为 4Kb,我不确定,但那是错误的。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用