急，如何去掉日志指定列中的空格

wzl189189

從web的日志中取數(shù)時(shí)，因?yàn)楦鞣N原因，導(dǎo)致日志的列中有一些空格，有的是一個(gè)空格，有的是多個(gè)空格

如下面的b.txt
網(wǎng)址|ip|時(shí)間
163.com|21.10.12.22 |17:10
163.com@12a|21.10.12.22  |17:10
163.com|21.10.12.22|17:10
163.com |21.10.12.22 |17:10
163.com |21.10.12.22|17:10
163.com  |21.10.12.22|17:10

    1、想要的結(jié)果是有多少個(gè)ip，我是這樣的：awk -F'|' '{if(!a[$2]++) ++b}END{print b}' b.txt
結(jié)果是３，但我知道結(jié)果應(yīng)該是１，因?yàn)榈诙�列有空格，有時(shí)是一個(gè)，有時(shí)是多個(gè)空格，
請(qǐng)教下這個(gè)去掉空格的操作（相當(dāng)于trim()）的shell是怎么寫的，要去掉前后多個(gè)空格

2、對(duì)第一列和第二列去掉空格，然后計(jì)算每個(gè)ip下去重的網(wǎng)址有多少（計(jì)算時(shí)要去掉結(jié)尾“@12a”，比如163.com@12a，去掉后是163.com）
  想要的結(jié)果是21.10.12.22|1

haooooaaa

1. awk -F '|' '{gsub(" ","");sub("@.*$","",$1);!a[$1$2]}END{print length(a)}' a  
   

復(fù)制代碼

tc1989tc

1. awk -F '|' '{a=gsub(/\s+/,"",$2);if (!b[$2]++) c++}END{print c}' file

復(fù)制代碼

jason680

回復(fù) 1# wzl189189

What You Want Is What You Code(WYWIWYC)

>> 有時(shí)是一個(gè)，有時(shí)是多個(gè)空格...
163.com |21.10.12.22 |17:10


$ awk -F'[ \t]*\\|[ \t]*' '{print "<"$1">,<"$2">,<"$3">"}' b.txt
<網(wǎng)址>,<ip>,<時(shí)間>
<163.com>,<21.10.12.22>,<17:10>
<163.com@12a>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>


>> ...去掉結(jié)尾“@12a”...

$ awk -F'[ \t]*\\|[ \t]*' '{sub(/@.*$/,"",$1);print "<"$1">,<"$2">,<"$3">"}' b.txt
<網(wǎng)址>,<ip>,<時(shí)間>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>
<163.com>,<21.10.12.22>,<17:10>

   

tc1989tc

1. awk -F '|' '{gsub(/\s+/,"",$2);gsub(/\s+/,"",$1);split($1,a,/@/);if(!b[$2";"a[1]])b[$2";"a[1]]++}END{for (c in b){split(c,a,";");d[a[1]] += b[c]} for (c in d){print c"|"d[c]}}' file

復(fù)制代碼

wzl189189

回復(fù) 2# haooooaaa

sub("@.*$","",$1);  --------    替換時(shí) ，為啥是“@.*$" , 為什么不是”@*$" 啊，即為什么要加個(gè)”."


   

wzl189189

回復(fù) 4# jason680

{sub(/@.*$/,"",$1);================  誠心請(qǐng)教，@后有個(gè)”." ，這個(gè)是什么語法？ 我看了好久沒有找到啊
   

jason680

回復(fù) 7# wzl189189

正則 Regular Expression(RE)


http://72891.cn/thread-218853-1-1.html
shell 十三問?
Part-II: Regular Expression