问题描述：

我正在编写一个很长的 Bash 脚本。我想将 CSV 文件中的单元格读入 Bash 变量。我可以解析行和第一列，但不能解析任何其他列。这是我目前的代码：

  cat myfile.csv|while read line
  do
    read -d, col1 col2 < <(echo $line)
    echo "I got:$col1|$col2"
  done

它只打印第一列。作为附加测试，我尝试了以下操作：

read -d, x y < <(echo a,b,)

而 $y 是空的。所以我尝试：

read x y < <(echo a b)

而 $y 是b。为什么？

解决方案 1：

您需要使用IFS而不是-d：

while IFS=, read -r col1 col2
do
    echo "I got:$col1|$col2"
done < myfile.csv

要跳过指定数量的标题行：

skip_headers=3
while IFS=, read -r col1 col2
do
    if ((skip_headers))
    then
        ((skip_headers--))
    else
        echo "I got:$col1|$col2"
    fi
done < myfile.csv

请注意，对于通用的 CSV 解析，您应该使用专门的工具来处理带有内部逗号的引号字段，以及 Bash 本身无法处理的其他问题。此类工具的示例包括cvstool和csvkit。

解决方案 2：

如何在 Bash 中解析 CSV 文件？

这个问题来晚了，而且狂欢确实提供了新功能，因为这个问题是关于狂欢并且因为已经发布的答案中没有一个能够显示出这种强大且合规的方法。

bash使用可加载模块解析下的 CSV 文件

符合RFC 4180 ，类似以下示例CSV 行的字符串：

12,22.45,"Hello, ""man"".","A, b.",42

应拆分为

1  12
2  22.45
3  Hello, "man".
4  A, b.
5  42

bash可加载.C 编译模块。

在下面狂欢，您可以创建、编辑和使用可加载的丙已编译的模块。一旦加载，它们便像任何其他内置模块一样工作！！（您可以在源代码树中找到更多信息。；）

当前源代码树（2021 年 10 月 15 日，bash V5.1-rc3）确实包含大量示例：

accept        listen for and accept a remote network connection on a given port
asort         Sort arrays in-place
basename      Return non-directory portion of pathname.
cat           cat(1) replacement with no options - the way cat was intended.
csv           process one line of csv data and populate an indexed array.
dirname       Return directory portion of pathname.
fdflags       Change the flag associated with one of bash's open file descriptors.
finfo         Print file info.
head          Copy first part of files.
hello         Obligatory "Hello World" / sample loadable.
...
tee           Duplicate standard input.
template      Example template for loadable builtin.
truefalse     True and false builtins.
tty           Return terminal name.
uname         Print system information.
unlink        Remove a directory entry.
whoami        Print out username of current user.

目录中有一个完整cvs可用的解析器examples/loadables：csv.c！！

在基于Debian GNU/Linux的系统下，你可能需要通过以下方式安装bash-builtins包

apt install bash-builtins

使用可加载的 bash-builtins：

然后：

enable -f /usr/lib/bash/csv csv

从那里，您可以将其用作csvbash内置命令。

使用我的样本：12,22.45,"Hello, ""man"".","A, b.",42

csv -a myArray '12,22.45,"Hello, ""man"".","A, b.",42'
printf "%s
" "${myArray[@]}" | cat -n
     1      12
     2      22.45
     3      Hello, "man".
     4      A, b.
     5      42

然后在循环中处理文件。

while IFS= read -r line;do
    csv -a aVar "$line"
    printf "First two columns are: [ '%s' - '%s' ]
" "${aVar[0]}" "${aVar[1]}"
done <myfile.csv

这种方法显然比使用任何其他组合都要快、最有效狂欢内置命令或者分叉至任何二进制文件。

不幸的是，根据您的系统实现，如果您的版本狂欢编译时没有loadable，这可能无法工作......

使用多行 CSV 字段完成示例。

符合RFC 4180 ，类似以下单个 CSV 行的字符串：

12,22.45,"Hello ""man"",
This is a good day, today!","A, b.",42

应拆分为

1  12
2  22.45
3  Hello "man",
   This is a good day, today!
4  A, b.
5  42

解析包含多行字段的 CSV 的完整示例脚本

这是一个包含1 个标题、4列和3行的小型示例文件。由于两个字段包含换行符，因此文件长度为6行。

Id,Name,Desc,Value
1234,Cpt1023,"Energy counter",34213
2343,Sns2123,"Temperatur sensor
to trigg for alarm",48.4
42,Eye1412,"Solar sensor ""Day /
Night""",12199.21

还有一个小脚本可以正确解析此文件：

#!/bin/bash

enable -f /usr/lib/bash/csv csv

file="sample.csv"
exec {FD}<"$file"

read -ru $FD line
csv -a headline "$line"
printf -v fieldfmt '%-8s: "%%q"\n' "${headline[@]}"
numcols=${#headline[@]}

while read -ru $FD line;do
    while csv -a row "$line" ; (( ${#row[@]} < numcols )) ;do
        read -ru $FD sline || break
        line+=$'
'"$sline"
    done
    printf "$fieldfmt\n" "${row[@]}"
done

这可能会呈现：（我曾经将换行符printf "%q"等不可打印字符表示为）`$'
'`

Id      : "1234"
Name    : "Cpt1023"
Desc    : "Energy counter"
Value   : "34213"

Id      : "2343"
Name    : "Sns2123"
Desc    : "$'Temperatur sensor
to trigg for alarm'"
Value   : "48.4"

Id      : "42"
Name    : "Eye1412"
Desc    : "$'Solar sensor "Day /
Night"'"
Value   : "12199.21"

您可以在那里找到完整的工作示例：csvsample.sh.txt或
csvsample.sh。

笔记：

在此示例中，我使用标题行来确定行宽（列数）。如果您的标题行可以容纳换行符（或者您的 CSV 使用多于 1 个标题行）。您必须将数字或列作为参数传递给脚本（以及标题行的数量）。

警告：

当然，用这个来解析 CSV 并不完美！这适用于许多简单的 CSV 文件，但要注意编码和安全性！！例如，此模块无法处理二进制字段！

仔细阅读csv.c 源代码注释和RFC 4180！

关于引用的多行字段的注意事项

特别是如果多行字段位于最后一列，则此方法将无法正确循环到第二个引用。

为此，您必须在$line使用模块解析之前检查引号奇偶校验csv。

解决方案 3：

从man页面：

-d delim delim 的第一个字符用于终止输入行，而不是换行符。

您使用的-d,将在逗号处终止输入行。它不会读取该行的其余部分。这就是 $y 为空的原因。

解决方案 4：

我们可以使用以下代码解析带有引号字符串并以 | 分隔的 csv 文件

while read -r line
do
    field1=$(echo "$line" | awk -F'|' '{printf "%s", $1}' | tr -d '"')
    field2=$(echo "$line" | awk -F'|' '{printf "%s", $2}' | tr -d '"')

    echo "$field1 $field2"
done < "$csvFile"

awk将字符串字段解析为变量并tr删除引号。

由于每个字段的执行速度都稍慢awk。

解决方案 5：

除了@Dennis Williamson 的回答之外，当第一行包含 CSV 的标题时，跳过第一行可能会有所帮助：

{
  read
  while IFS=, read -r col1 col2
  do
    echo "I got:$col1|$col2"
  done 
} < myfile.csv

解决方案 6：

如果您想读取包含几行的 CSV 文件，那么这就是解决方案。

while IFS=, read -ra line
do 
    test $i -eq 1 && ((i=i+1)) && continue
    for col_val in ${line[@]}
    do
        echo -n "$col_val|"                 
    done
    echo        
done < "$csvFile"