Linux 终端输入:从终端截断行读取用户输入,限制为 4095 个字符

2024-11-04 08:43:00
admin
原创
39
摘要:问题描述:在 bash 脚本中,我尝试在设置后使用内置read命令从标准输入读取行`IFS=$''`。如果我将输入粘贴到读取中,行会在 4095 个字符的限制处被截断。此限制似乎来自从终端读取,因为这完全正常:fill= for i in $(seq 1 94); do fill=&...

问题描述:

在 bash 脚本中,我尝试在设置后使用内置read命令从标准输入读取行`IFS=$'
'`。如果我将输入粘贴到读取中,行会在 4095 个字符的限制处被截断。此限制似乎来自从终端读取,因为这完全正常:

fill=
for i in $(seq 1 94); do fill="${fill}x"; done
for i in $(seq 1 100); do printf "%04d00$fill" $i; done | (read line; echo $line)

我使用 Python 脚本时也遇到了同样的问题(不接受来自终端的长度超过 4095 的输入,但可以接受来自管道的输入):

#!/usr/bin/python

from sys import stdin

line = stdin.readline()
print('%s' % line)

即使 C 程序也可以同样工作,使用read(2)

#include <stdio.h>
#include <unistd.h>

int main(void)
{
    char buf[32768];
    int sz = read(0, buf, sizeof(buf) - 1);
    buf[sz] = '';
    printf("READ LINE: [%s]
", buf);
    return 0;
}

在所有情况下,我都无法输入超过 4095 个字符。输入提示停止接受字符。

问题 1:在 Linux 系统(至少是 Ubuntu 10.04 和 13.04)中,有没有办法从终端以交互方式读取超过 4095 个字符的内容?

问题 2:这个限制从何而来?

受影响的系统:我注意到 Ubuntu 10.04/x86 和 13.04/x86 中存在此限制,但 Cygwin(至少是最新版本)在超过 10000 个字符时不会截断(没有进一步测试,因为我需要让此脚本在 Ubuntu 中运行)。使用的终端:虚拟控制台和 KDE konsole(Ubuntu 13.04)和gnome-terminal(Ubuntu 10.04)。


解决方案 1:

请参阅termios(3)手册页的“规范和非规范模式”部分。

通常,终端(标准输入)处于规范模式;在此模式下,内核将在将输入返回给应用程序之前缓冲输入行。Linux 的硬编码限制(N_TTY_BUF_SIZE在 中定义${linux_source_path}/include/linux/tty.h)设置为 4096,允许输入 4095 个字符(不包括结束的新行)。您还可以查看文件${linux_source_path}/drivers/tty/n_tty.c、函数n_tty_receive_buf_common()和上面的注释。

在非规范模式下,默认情况下内核不会进行缓冲,一旦返回一个输入字符(按下键) ,read(2)系统调用就会立即返回。您可以操纵终端设置来读取指定数量的字符或为非规范模式设置超时,但根据termios(3)手册页(以及上述注释n_tty_receive_buf_common()),硬编码限制也是 4095。

Bashread内置命令在非规范模式下仍然有效,如下所示:

IFS=$'
'      # Allow spaces and other white spaces.
stty -icanon   # Disable canonical mode.
read line      # Now we can read without inhibitions set by terminal.
stty icanon    # Re-enable canonical mode (assuming it was enabled to begin with).

添加此修改后,您可以粘贴长度超过 4096 个字符的字符串并使用内置命令stty -icanon成功读取它(我成功尝试了长度超过 10000 个字符)。bash`read`

如果您将其放在一个文件中,即将其制作成脚本,则您可以使用它strace来查看被调用的系统调用,并且您将看到read(2)多次被调用,每次在您键入输入时都返回一个字符。

解决方案 2:

我没有为您提供解决方法,但我可以回答问题 2。在 Linux 中,PIPE_BUF 设置为 4096(在limits.h)如果您向管道写入超过 4096,它将被截断。

/usr/include/linux/limits.h

#ifndef _LINUX_LIMITS_H
#define _LINUX_LIMITS_H

#define NR_OPEN         1024

#define NGROUPS_MAX    65536    /* supplemental group IDs are available */
#define ARG_MAX       131072    /* # bytes of args + environ for exec() */
#define LINK_MAX         127    /* # links a file may have */
#define MAX_CANON        255    /* size of the canonical input queue */
#define MAX_INPUT        255    /* size of the type-ahead buffer */
#define NAME_MAX         255    /* # chars in a file name */
#define PATH_MAX        4096    /* # chars in a path name including nul */
#define PIPE_BUF        4096    /* # bytes in atomic write to a pipe */
#define XATTR_NAME_MAX   255    /* # chars in an extended attribute name */
#define XATTR_SIZE_MAX 65536    /* size of an extended attribute value (64k) */
#define XATTR_LIST_MAX 65536    /* size of extended attribute namelist (64k) */

#define RTSIG_MAX     32

#endif

解决方案 3:

问题肯定不是出在 read() 上,因为它可以读取任意有效的整数值。问题出在堆内存或管道大小上,因为它们是唯一可能限制大小的因素。

相关推荐
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   609  
  在现代项目管理中,资源的有效利用是确保项目成功的关键因素之一。随着技术的不断进步,越来越多的工具和软件被开发出来,以帮助项目经理和团队更高效地管理资源。本文将介绍10款工具,这些工具可以帮助项目团队提升资源利用效率,从而实现项目目标。禅道项目管理软件禅道项目管理软件是一款开源的项目管理工具,广泛应用于软件开发和其他行业...
项目管理系统   3  
  在项目管理领域,软件工具的不断升级和创新是推动效率和协作的关键。2024年,众多项目管理软件将迎来一系列令人期待的升级功能,这些新特性不仅将提升团队的工作效率,还将增强用户体验和数据分析能力。本文将详细介绍10款项目管理软件的最新升级功能,帮助项目经理和团队成员更好地规划和执行项目。禅道项目管理软件禅道项目管理软件一直...
开源项目管理工具   2  
  信创国产系统的10个关键厂商及其技术生态随着全球信息技术格局的不断演变,信创(信息技术应用创新)产业作为国产化替代的重要阶段,正逐步成为推动我国信息技术自主可控、安全可靠的核心力量。信创产业不仅关乎国家信息安全,也是数字经济高质量发展的关键支撑。本文将深入探讨信创国产系统中的10个关键厂商及其技术生态,分析它们在信创浪...
项目管理流程   0  
  在探讨项目管理的广阔领域中,成功并非偶然,而是精心策划、高效执行与持续优化的结果。项目管理的成功之道,可以从明确的目标设定与规划、高效的团队协作与沟通、以及灵活的风险管理与适应变化这三个核心方面进行深入解析。每个方面都是项目成功的基石,它们相互交织,共同支撑起项目的顺利推进与最终成就。明确的目标设定与规划项目管理的首要...
建筑工程项目管理规范   0  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用