awk中關(guān)于FNR和NR的例子，請(qǐng)高手賜教

liangzij

看到一個(gè)關(guān)于awk的案例，AIX下話說(shuō)有兩個(gè)數(shù)據(jù)文件，分別為
1.txt，內(nèi)容：
0011AAA 200.00 20050321
0012BBB 300.00 20050621
0013DDD 400.00 20050622
0014FFF 500.00 20050401

2.txt，內(nèi)容：
I0011  11111
I0012  22222
I0014  55555
I0013  66666

目的是利用awk命令，比較1.txt的1-4字符 和 2.txt的2-5 字符，如果相同，將2.txt 的第二列 與 1.txt 合并
需要取得效果如下：
0011AAA 200.00 20050321 11111
0012BBB 300.00 20050621 22222
0013DDD 400.00 20050622 66666
0014FFF 500.00 20050401 55555

命令是：
awk 'NR==FNR {a[substr($1,2,5)]=$2} NR>FNR && a[b=substr($1,1,4)] {print $0,a[b]}'  2.txt 1.txt

有沒有awk高手能夠詳細(xì)解釋一下上述命令的實(shí)現(xiàn)過程？謝謝了

liangzij

我自己是這么理解的
命令是：
awk 'NR==FNR {a[substr($1,2,5)]=$2} NR>FNR && a[b=substr($1,1,4)] {print $0,a[b]}'  2.txt 1.txt

將命令分為兩個(gè)部分。
（1）先解析NR==FNR {a[substr($1,2,5)]=$2}
對(duì)于NR，讀取行數(shù)分別為1234（2.txt），5678（1.txt）
對(duì)于FNR，讀取行數(shù)分別為1234（2.txt），1234（1.txt）
因此NR==FNR的范圍就在2.txt文件里了，substr函數(shù)得出的是：
a[0011]=$2=11111
a[0012]=$2=22222
a[0013]=$2=33333
a[0014]=$2=44444

（2）再來(lái)看NR>FNR && a[b=substr($1,1,4)] {print $0,a[b]}這一部分
NR>FNR的范圍實(shí)在1.txt文件里，substr函數(shù)得出的是：
a[b=0011]
a[b=0012]
a[b=0013]
a[b=0014]
以上數(shù)組是在（1）中已經(jīng)賦值了
再print $0,a[b]，此處的$0是范圍在1.txt里的

得出最后的結(jié)果

不知道我分析的過程對(duì)不對(duì)，還希望大家來(lái)指正

liangzij

最近在學(xué)習(xí)awk，有個(gè)高人總結(jié)的awk經(jīng)驗(yàn)，貼出來(lái)跟大家分享：
awk的出錯(cuò)提示不怎么友好，經(jīng)常報(bào)錯(cuò)讓摸不著頭腦，所以要對(duì)它的格式某些地方特別敏感！這里我根據(jù)經(jīng)驗(yàn)特別說(shuō)明如下幾點(diǎn)：
1、awk 后面的語(yǔ)句一定要有兩個(gè)’’ 包含起來(lái)！
2、一定要有一個(gè)文本的輸入，可以放在后面，如本例的file，也可以通過管道符如|傳給awk
如 ls |awk ‘{print $1}’ 這個(gè)時(shí)候的輸入文件就是把ls的結(jié)果輸給awk去處理！
3、-F參數(shù)是用來(lái)控制分割符的，比如 cat ljb.txt |awk –F “;” ‘{print $1，$2}’表示將ljb.txt文件中的內(nèi)容的分號(hào)做為分割符，打印出第一列和第二列的值。這里要特別注意awk –F”;” 命令中，-F和”;”是沒有空格的。
4、awk中的==表示等于，而=表示賦值，如果輸錯(cuò)了，結(jié)果就完全錯(cuò)了。
比如 cat ljb.txt |awk ‘{if($3==6) print $0}’表示如果ljb.txt中默認(rèn)以空格分割，假如第三列值為6，打印出來(lái)，如果這里將==寫=,那就會(huì)打印出所有的值，其中第三列都被更新為6！
5、判斷語(yǔ)句要有括號(hào)
如if($3==6)
6、這里我跳出AWK說(shuō)一下SHELL，SHELL的[]中往往是判斷，類似為
if [ $1=2 ]等，這里有別于awk,shell這個(gè)時(shí)候其實(shí)就是表示等于而不是賦值，如果你把=改寫成兩個(gè)=的==，那反而出錯(cuò)了，另外SHELL中也要留意，這里[]中的代碼不能頂在[]的兩邊，如：[$1=2]或者是[$1=2 ]和[ $1=2]都是錯(cuò)誤的！
7、整理了shell比較有別于其他編寫程語(yǔ)句的一些特定腳本寫法，現(xiàn)將awk 相關(guān)部分特別含義寫法整理如下：
ARGC             命令行參數(shù)個(gè)數(shù)
ARGV             命令行參數(shù)排列
ENVIRON          支持隊(duì)列中系統(tǒng)環(huán)境變量的使用
FILENAME         awk瀏覽的文件名
FNR               瀏覽文件的記錄數(shù)
FS                設(shè)置輸入域分隔符，等價(jià)于命令行- F選項(xiàng)
NF                瀏覽記錄的域個(gè)數(shù)
NR                已讀的記錄數(shù)
OFS               輸出域分隔符
ORS               輸出記錄分隔符
RS                控制記錄分隔符

waker

NR==FNR處理第一個(gè)數(shù)據(jù)文件
NR>FNR處理其它數(shù)據(jù)文件

personball

回復(fù) 1# liangzij


    好長(zhǎng)。。
只提一點(diǎn)：
NR表示總記錄數(shù)
FNR表示當(dāng)前文件記錄數(shù)

簡(jiǎn)單的例子，A文件10行 B文件20行，awk xxxx命令  A B 的時(shí)候，NR和FNR同時(shí)計(jì)數(shù)，當(dāng)處理完A文件的記錄后(FNR=10,NR=10)，F(xiàn)NR重置后(FNR=1,2...)重新為B文件計(jì)數(shù)，而NR繼續(xù)累積(NR=11,12...)
所以NR==FNR就是只對(duì)第一個(gè)文件進(jìn)行處理，NR>FNR就是只對(duì)后面的文件處理（不一定是第二個(gè)，也可以是第三個(gè)，看awk后面跟的文件個(gè)數(shù)）

tjpm

建議用FILENAME來(lái)對(duì)輸入文件做區(qū)分

liangzij

FILENAME怎么區(qū)分呢？

personball

回復(fù) 7# liangzij

舉個(gè)例子。。
    awk 'FILENAME=="new.conf"{do sth...;next}{do sth...}' new.conf 1.conf 2.conf

源自：http://72891.cn/thread-3760955-1-1.html

liangzij

回復(fù) 8# personball


   謝謝 personball和其他朋友的幫忙