如何在 Linux 上使用 grep 搜索包含 DOS 行尾(CRLF)的文件?

2024-11-05 08:37:00
admin
原创
186
摘要:问题描述:我想在 Linux 上使用 grep 搜索包含 DOS 行尾的文件。如下所示:grep -IUr --color ' ' . 以上内容似乎与文字相匹配,rn但这并不是所需的。其输出将通过 xargs 传输到 todos 中,将 crlf 转换为 lf,如下所示gr...

问题描述:

我想在 Linux 上使用 grep 搜索包含 DOS 行尾的文件。如下所示:

grep -IUr --color '
' .

以上内容似乎与文字相匹配,rn但这并不是所需的。

其输出将通过 xargs 传输到 todos 中,将 crlf 转换为 lf,如下所示

grep -IUrl --color '^M' . | xargs -ifile fromdos 'file'

解决方案 1:

grep 可能不是您想要的工具。它将为每个文件中的每行匹配行打印一行。除非您想对 10 行文件运行 10 次 todos,否则 grep 不是最佳方法。使用 find 对树中的每个文件运行 file,然后在其中搜索“CRLF”,您将为每个具有 dos 样式行结尾的文件获得一行输出:

find . -not -type d -exec file "{}" ";" | grep CRLF

将会得到类似如下的结果:

./1/dos1.txt: ASCII text, with CRLF line terminators
./2/dos2.txt: ASCII text, with CRLF line terminators
./dos.txt: ASCII text, with CRLF line terminators

解决方案 2:

使用Ctrl+ V, Ctrl+M在 grep 字符串中输入文字回车符。所以:

grep -IUr --color "^M"

将会起作用 - 如果^M您按照我建议的那样输入文字 CR。

如果您想要文件列表,您-l也需要添加该选项。

解释

  • -I忽略二进制文件

  • -U防止 grep 删除 CR 字符。默认情况下,如果它确定它是文本文件,它会执行此操作。

  • -r递归读取每个目录下的所有文件。

解决方案 3:

使用RipGrep(取决于你的 shell,你可能需要引用最后一个参数):

rg -l '
'
-l, --files-with-matches
Only print the paths with at least one match.

解决方案 4:

如果你的 grep 版本支持-P (--perl-regexp)选项,那么

grep -lUP '
$'

可以使用。

解决方案 5:

# list files containing dos line endings (CRLF)

cr="$(printf "
")"    # alternative to ctrl-V ctrl-M

grep -Ilsr "${cr}$" . 

grep -Ilsr $'
$' .   # yet another & even shorter alternative

解决方案 6:

dos2unix有一个文件信息选项,可用于显示将要转换的文件:

dos2unix -ic /path/to/file

要以递归方式执行此操作,您可以使用bashglobstar选项,该选项对于当前 shell 启用shopt -s globstar

dos2unix -ic **      # all files recursively
dos2unix -ic **/file # files called “file” recursively

或者你也可以使用find

find -type f -exec dos2unix -ic {} +    # all files recursively (ignoring directories)
find -name file -exec dos2unix -ic {} + # files called “file” recursively

解决方案 7:

您可以在 unix 中使用 file 命令。它为您提供文件的字符编码以及行终止符。

$ file myfile
myfile: ISO-8859 text, with CRLF line terminators
$ file myfile | grep -ow CRLF
CRLF  

解决方案 8:

查询是搜索...我遇到了类似的问题...有人将混合行尾提交到版本控制中,所以现在我们有一堆带有0x0d
0x0d 0x0a行尾的文件。请注意

grep -P 'x0dx0a'

找到所有行,而

grep -P 'x0dx0dx0a'

grep -P 'x0dx0d'

找不到任何行,所以当涉及到行结束模式时,grep 内部可能发生了“其他”事情......对我来说很不幸!

解决方案 9:

如果像我一样,你的极简主义 unix 不包含像file命令这样的精细功能,并且grep表达式中的反斜杠不配合,请尝试以下操作:

$ for file in `find . -type f` ; do
> dump $file | cut -c9-50 | egrep -m1 -q ' 0d| 0d'
> if [ $? -eq 0 ] ; then echo $file ; fi
> done

您可能希望对上述内容进行的修改包括:

  • 调整find命令以仅查找您要扫描的文件

  • 将转储命令更改为od或任何您有的文件转储实用程序

  • 确认cut命令包含前导空格和尾随空格以及转储实用程序输出的十六进制字符

  • 为了提高效率,将转储输出限制为前 1000 个字符左右

例如,使用od而不是dump可能会对您有用:

 od -t x2 -N 1000 $file | cut -c8- | egrep -m1 -q ' 0d| 0d|0d$'
相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   1565  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1354  
  信创国产芯片作为信息技术创新的核心领域,对于推动国家自主可控生态建设具有至关重要的意义。在全球科技竞争日益激烈的背景下,实现信息技术的自主可控,摆脱对国外技术的依赖,已成为保障国家信息安全和产业可持续发展的关键。国产芯片作为信创产业的基石,其发展水平直接影响着整个信创生态的构建与完善。通过不断提升国产芯片的技术实力、产...
国产信创系统   21  
  信创生态建设旨在实现信息技术领域的自主创新和安全可控,涵盖了从硬件到软件的全产业链。随着数字化转型的加速,信创生态建设的重要性日益凸显,它不仅关乎国家的信息安全,更是推动产业升级和经济高质量发展的关键力量。然而,在推进信创生态建设的过程中,面临着诸多复杂且严峻的挑战,需要深入剖析并寻找切实可行的解决方案。技术创新难题技...
信创操作系统   27  
  信创产业作为国家信息技术创新发展的重要领域,对于保障国家信息安全、推动产业升级具有关键意义。而国产芯片作为信创产业的核心基石,其研发进展备受关注。在信创国产芯片的研发征程中,面临着诸多复杂且艰巨的难点,这些难点犹如一道道关卡,阻碍着国产芯片的快速发展。然而,科研人员和相关企业并未退缩,积极探索并提出了一系列切实可行的解...
国产化替代产品目录   28  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用