我发现 AWK 真的很有用。这是我放在一起来操作数据的一个衬里。
ls | awk '{ print "awk " "'"'"'" " {print $1,$2,$3} " "'"'"'" " " $1 ".old_ext > " $1 ".new_ext" }' > file.csh
我使用此 AWK 制作了一个脚本文件,该文件将重命名一些文件并仅打印出选择性列。有谁知道更好的方法来做到这一点?你最擅长的 AWK 1 班轮或巧妙的操作是什么?
我发现 AWK 真的很有用。这是我放在一起来操作数据的一个衬里。
ls | awk '{ print "awk " "'"'"'" " {print $1,$2,$3} " "'"'"'" " " $1 ".old_ext > " $1 ".new_ext" }' > file.csh
我使用此 AWK 制作了一个脚本文件,该文件将重命名一些文件并仅打印出选择性列。有谁知道更好的方法来做到这一点?你最擅长的 AWK 1 班轮或巧妙的操作是什么?
AWK 书中有很多很好的例子。它们曾经是从Kernighan 的网页(现在是 404)收集下载的。
你可以在这里找到几个不错的单衬里。
我用这个:
df -m | awk '{p+=$3}; END {print p}'
总计跨文件系统的系统上使用的所有磁盘空间。
许多年前,我在 awk 中写了一个尾部脚本:
#!/usr/bin/awk -f
BEGIN {
lines=10
}
{
high = NR % lines + 1
a[high] = $0
}
END {
for (i = 0; i < lines; i++) {
n = (i + high) % lines + 1
if (n in a) {
print a[n]
}
}
}
我知道这很愚蠢,但这就是 awk 对你所做的。玩它很有趣。
Henry Spencer 在 awk 上写了一个相当不错的 nroff 实现。他称之为“awf”。他还声称,如果 Larry Wall 知道 awk 有多么强大,他就不需要发明 perl。
这是我过去经常使用的几个 awk……请注意,您可以使用 $1、$2 等来获取所需的列。因此,对于操作一堆文件,例如,这是一个愚蠢的命令,您可以使用它来代替 mv ...
ls -1 *.mp3 | awk '{printf("mv %s newDir/%s\n",$1,$1)}' | /bin/sh
或者,如果您正在查看一组流程,也许...
ps -ef | grep -v username | awk '{printf("kill -9 %s\n",$2)}' | /bin/sh
相当微不足道,但你可以看到这会给你带来很多好处。=) 我以前做的大部分事情你都可以用 xargs 来做,但是嘿,谁需要它们新奇的命令?
我经常使用这个脚本来编辑 PATH 和类似路径的环境变量。用法:
export PATH=$(clnpath /new/bin:/other/bin:$PATH /old/bin:/other/old/bin)
此命令在 PATH 前面添加 /new/bin 和 /other/bin,从 PATH 中删除 /old/bin 和 /other/old/bin(如果存在 - 如果不存在则没有错误),并删除路径上的重复目录条目。
: "@(#)$Id: clnpath.sh,v 1.6 1999/06/08 23:34:07 jleffler Exp $"
#
# Print minimal version of $PATH, possibly removing some items
case $# in
0) chop=""; path=${PATH:?};;
1) chop=""; path=$1;;
2) chop=$2; path=$1;;
*) echo "Usage: `basename $0 .sh` [$PATH [remove:list]]" >&2
exit 1;;
esac
# Beware of the quotes in the assignment to chop!
echo "$path" |
${AWK:-awk} -F: '#
BEGIN { # Sort out which path components to omit
chop="'"$chop"'";
if (chop != "") nr = split(chop, remove); else nr = 0;
for (i = 1; i <= nr; i++)
omit[remove[i]] = 1;
}
{
for (i = 1; i <= NF; i++)
{
x=$i;
if (x == "") x = ".";
if (omit[x] == 0 && path[x]++ == 0)
{
output = output pad x;
pad = ":";
}
}
print output;
}'
计算 httpd 使用的内存
ps -ylC httpd | awk '/[0-9]/ {SUM += $8} END {print SUM/1024}'
或通过替换 httpd 的任何其他进程。除以 1024 得到以 MB 为单位的输出。
我设法为 UNIX 构建了一个 DOS 树命令模拟器( find + awk ):
find . -type d -print 2>/dev/null|awk '{for (i=1;i< NF;i++)printf("%"length($i)"s","|");gsub(/[^\/]*\//,"--",$0);print $NF}' FS='/'
在两个图案之间打印线条:
awk '/END/{flag=0}flag;/START/{flag=1}' inputFile
详解: http: //nixtip.wordpress.com/2010/10/12/print-lines-between-two-patterns-the-awk-way/
几个最喜欢的,基本上彼此无关。阅读为 2 个不同的、不相关的建议。
:
对于那些经常使用 awk 的人,就像我在工作中进行日志分析一样,我经常发现自己需要找出文件的列号是什么。因此,如果我正在分析 Apache 访问文件(可以在此处找到一些示例),我会针对该文件运行以下脚本:
NR == 1 {
for (i = 1 ; i <= NF ; i++)
{
print i "\t" $i
}
}
NR > 1 {
exit
}
我通常称它为“cn.awk”,表示“列”数字。有创意吧?无论如何,输出看起来像:
1 64.242.88.10
2 -
3 -
4 [07/Mar/2004:16:05:49
5 -0800]
6 "GET
7 /twiki/bin/edit/Main/Double_bounce_sender?topicparent=Main.ConfigurationVariables
8 HTTP/1.1"
9 401
10 12846
很容易分辨出什么是什么。我通常在我的服务器上给它起别名,并且到处都有。
现在,假设您的文件有一个标题行,并且您宁愿使用这些名称而不是字段编号。这允许您这样做:
NR == 1 {
for (i = 1 ; i <= NF ; i++)
{
field[$i] = i
}
}
现在,假设我有这个标题行......
metric,time,val,location,http_status,http_request
...我想总结一下val
。我可以通过名称来引用它,而不是引用 $3:
NR > 1 {
SUM += $field["val"]
}
主要好处是使脚本更具可读性。
打印字段是大多数 AWK 教程中首先提到的内容之一。
awk '{print $1,$3}' file
鲜为人知但同样有用的是排除字段,这也是可能的:
awk '{$1=$3=""}1' file