如何統(tǒng)計(jì)日志中訪問每個(gè)url次數(shù)最多的ip

心乃南部之星

比如日志格式如下：
163.com 1.1.1.1  
163.com 2.2.2.2  
163.com 1.1.1.1  
tom.com 3.3.3.3  
tom.com 3.3.3.3  
tom.com 4.4.4.4  

想要得到的結(jié)果：
163.com 訪問次數(shù)最多的ip 訪問次數(shù)
........

yestreenstars

1. awk '{a[$1" "$2]++}END{for(i in a)print i,a[i]}' file | sort -k1 -nrk3 | awk '!a[$1]++'

復(fù)制代碼

心乃南部之星

回復(fù) 2# yestreenstars


    謝謝，唉，裝牛角尖了，老想著一條awk搞定。

yestreenstars

回復(fù) 3# 心乃南部之星


    呵呵，也不是不行，只是寫起來可能會(huì)很復(fù)雜，執(zhí)行效率也不一定比上面那條高，我現(xiàn)在在想~

seesea2517

回復(fù) 3# 心乃南部之星


    一條當(dāng)然可以。Let me have a look!

seesea2517

回復(fù) 4# yestreenstars


    想到啦？我不想想。

jason680

回復(fù) 3# 心乃南部之星

How about this.
Note: it have some issue on the same max number on the same url($1)

$ awk '{a[$1" "$2]++;if(a[$1" "$2]>m[$1]){m[$1]=a[$1" "$2];f[$1]=$1" "$2}}END{for(n in f)print f[n],m[n]}' FILE
163.com 1.1.1.1 2
tom.com 3.3.3.3 2
   

seesea2517

回復(fù) 7# jason680


    厲害啊，我才想出來，但是方法沒你好。

seesea2517

想起來了，@jason680的要求文件是排序的，我這個(gè)不需要排序，所以呢復(fù)雜一點(diǎn)沒啥不好意思的哈哈。

1. [seesea@UC ~]$ cat file  | awk '{ar[$0]++; ar1[$1]=0} END{for (i in ar){ split(i, tmp); if(ar1[tmp[1]] < ar[i]) {ar1[tmp[1]]=ar[i]; ar2[tmp[1]]=i} } for (i in ar1) print ar2[i] OFS ar1[i] }'
   
2. 163.com 1.1.1.1 2
   
3. tom.com 3.3.3.3 2

復(fù)制代碼

yestreenstars

@jason680
@seesea2517
我也想了個(gè)排好序的awk：

1. awk '$1!=k&&k{print n,s[n];m=n=""}{t=$1" "$2;s[t]++;if(s[t]>m){m=s[t];n=t}k=$1}END{print n,s[n]}'

復(fù)制代碼