linux - 使用 linux 脚本进行简单聚合

Question

假设我有一个包含如下行的文本文件：

foo 10
bar 15
bar 5
foo 30
...

生成以下输出的最简单方法是什么：

foo 40
bar 20

?

Answer 1

这将做：

awk '{arr[$1]+=$2;} END { for (i in arr) print i, arr[i]}'  file

有关更多信息，请阅读 Awk 的关联数组。

Answer 2

使用这个 awk 脚本：

awk '{sums[$1] += $2} END {for (a in sums) print a, sums[a]}' infile

输出：

foo 40
bar 20

使用这个关于使用关联数组的 awk 教程：

Answer 3

如果你对 perl 感兴趣：

perl -F -lane '$X{$F[0]}=$X{$F[0]}+$F[1];if(eof){foreach (keys %X){print $_." ".$X{$_}}}' your_file

Answer 4

这是排序、GNU sed 和 bc 的一种方法：

sort infile | 
  sed -r ':a; N; s/([^ ]+) +([^\n]+)\n\1/\1 \2 +/; ta; P; D' |
  sed -r 'h; s/[^ ]+/echo/; s/$/ | bc/e; G; s/([^\n]+)\n([^ ]+).*/\2 \1/'

输出：

bar 20
foo 40

第一个 sed 使用相同的键+在数字之间添加 a 连接相邻行，第二个将总和传递给 bc。