截取所有相同的名至結(jié)束行

unix520

a.txt
截取所有相同的名至結(jié)束行
如果從倒數(shù)行中發(fā)現(xiàn)第一個有 "新增" 字符串的行,  需截取所有相同的 "MAC"  至 "結(jié)束"  行   , 即截取相同 "MAC"  至 "結(jié)束"  行
最后一個有 "新增" 字符串的行其中MAC 有隨時可能變化,  并不是固定名詞, 也不是在行中固定列數(shù),   所以請使用MAC格式匹配

1. MAC格式  /([0-9A-Z]{2}:){5}[0-9A-Z]{2}/

復(fù)制代碼

為了提高效率, 請從倒數(shù)開始搜索有 "新增" 字符串的行尋找開始工作, ·這樣可以大大減少從開始搜索到結(jié)尾過程時間

希望用awk實(shí)現(xiàn)

1. 
   
2. a.txt
   
3. a 新增  01:02:03:04:05:06 (
   
4. ***
   
5. b 結(jié)束
   
6. 
   
7. e 新增  U 1A:2A:3A:4A:5A:6A (
   
8. **
   
9. f 結(jié)束
   
10. 
    
11. g 新增  01:02:03:04:05:06 (
    
12. **
    
13. f 結(jié)束
    
14. 
    
15. c 新增  1A:2A:3A:4A:5A:6A (
    
16. ***
    
17. d 結(jié)束
    
18. 
    
19. v A1:A2:A3:A4:A5:A6
    

復(fù)制代碼

1. b.txt
   
2. e 新增  U 1A:2A:3A:4A:5A:6A (
   
3. **
   
4. f 結(jié)束
   
5. 
   
6. c 新增  1A:2A:3A:4A:5A:6A (
   
7. ***
   
8. d 結(jié)束
   

復(fù)制代碼

wh7211

回復(fù) 1# unix520

unix520你好：
下面你發(fā)表的主題中均有大家給你的回復(fù)，而你卻把1樓提問帖的內(nèi)容修改成了如“謝謝”、“算了 不問了”、“新年快樂”等內(nèi)容。大家回復(fù)幫你解決問題是要耗費(fèi)時間和精力的，你這樣做是對回復(fù)人的不尊重，也讓該主題失去了參考價值。請恢復(fù)這些主題中1樓提問帖的內(nèi)容。

http://72891.cn/forum.php?mod=viewthread&tid=4319222
http://72891.cn/forum.php?mod=viewthread&tid=4319242
http://72891.cn/forum.php?mod=viewthread&tid=4319228
http://72891.cn/forum.php?mod=viewthread&tid=4319296

unix520

回復(fù) 2# wh7211

沒有不尊重意思,   請不要誤會哦, 只不過部分涉及到某些不宜公開公司資料，如有一些不當(dāng)之處影響了大家,  實(shí)在抱歉, 希望大家諒解。已全部更正及還原主題意思

wh7211

回復(fù) 1# unix520

1. cat 1
   
2. a 新增  01:02:03:04:05:06 (
   
3. ***
   
4. b 結(jié)束
   
5. 
   
6. e 新增  U 1A:2A:3A:4A:5A:6A (
   
7. **
   
8. f 結(jié)束
   
9. 
   
10. g 新增  01:02:03:04:05:06 (
    
11. **
    
12. f 結(jié)束
    
13. 
    
14. c 新增  1A:2A:3A:4A:5A:6A (
    
15. ***
    
16. d 結(jié)束
    
17. 
    
18. v A1:A2:A3:A4:A5:A6
    
19. 
    
20. awk '/新增/{a=1;match($0,"(([0-9A-Z]{2}:){5}[0-9A-Z]{2})",b);d[++c]=b[1]}a{e[c]=e[c]?e[c]"\n"$0:$0}/結(jié)束/{a=0}END{for(i=1;i<=c;i++){if(d[i]==d[c]){print e[i]"\n">"2"}}}' 1
    
21. 
    
22. cat 2
    
23. e 新增  U 1A:2A:3A:4A:5A:6A (
    
24. **
    
25. f 結(jié)束
    
26. 
    
27. c 新增  1A:2A:3A:4A:5A:6A (
    
28. ***
    
29. d 結(jié)束
    
30. 
    

復(fù)制代碼

unix520

回復(fù) 4# wh7211

結(jié)果是正確,  但是似乎有點(diǎn)慢,  將主題例重復(fù)復(fù)制粘貼到100m文件試    在同一臺配置上用了53秒,   由于每次都會寫入新的  所以需要提高效率才行 ,  還能再快一些嗎?   另外想用win gawk環(huán)境執(zhí)行

1. $ time awk '/新增/{a=1;match($0,"(([0-9A-Z]{2}:){5}[0-9A-Z]{2})",b);d[++c]=b[1]}a{e[c]=e[c]?e[c]"\n"$0:$0}/結(jié)束/{a=0}END{for(i=1;i<=c;i++){if(d[i]==d[c]){print e[i]"\n">"2.txt"}}}' 1.txt
   
2. 
   
3. real    0m53.557s

復(fù)制代碼

在同一臺配置上用已棄用代碼 用時僅14s,  由于是列匹配模式, 有很多列不整齊問題,  想棄用   但如果可以修改為匹配MAC,   效率應(yīng)該也很理想的

1. $ time awk 'NR==FNR{if($2~/新增/){a=$3}}NR>FNR{if($3~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1}};if(b==1){print $0;if($2~/結(jié)束/){print "";b=0}}}' 1.txt 1.txt >2.txt
   
2. 
   
3. real    0m14.997s
   
4. 
   

復(fù)制代碼

wh7211

回復(fù) 5# unix520


文件1大小100M，測試結(jié)果如下，代碼2效率更高。

代碼1：

1. time awk '/新增/{a=1;match($0,"(([0-9A-Z]{2}:){5}[0-9A-Z]{2})",b);d[++c]=b[1]}a{e[c]=e[c]?e[c]"\n"$0:$0}/結(jié)束/{a=0}END{for(i=1;i<=c;i++){if(d[i]==d[c]){print e[i]"\n">"2"}}}' 1
   
2. 
   
3. real        0m17.208s

復(fù)制代碼

代碼2：

1. time awk '/新增/{a=1;for(i=1;i<=NF;i++){if($i~/([0-9A-Z]{2}:){5}[0-9A-Z]{2}/){c[++b]=$i;break}}}a{d[b]=d[b]?d[b]"\n"$0:$0}/結(jié)束/{a=0}END{for(i=1;i<=b;i++){if(c[i]==c[b]){print d[i]"\n">"2"}}}' 1
   
2. 
   
3. real        0m7.504s

復(fù)制代碼

unix520

回復(fù) 6# wh7211

謝謝,,   可能是辦公設(shè)備配置差原因

unix520

1. awk 'NR==FNR{if($2~/新增/){a=$3}}NR>FNR{if($3~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1}};if(b==1){print $0;if($2~/結(jié)束/){print "";b=0}}}' 1.txt 1.txt >2.txt

復(fù)制代碼

如果按以上代碼思路, 將其修改為匹配MAC格式方法,  請問該如何改呢?



僅修改這2處似乎不行
{if($2~/新增/){a=$3}}
{if($3~a)


將a=$3改為:  {if($2~/新增/){a=/([0-9A-Z]{2}{5}[0-9A-Z]{2}/}}

將{if($3~a)改為: {if(([0-9A-Z]{2}{5}[0-9A-Z]{2}~a)

1. awk 'NR==FNR{if($2~/新增/){a=/([0-9A-Z]{2}:){5}[0-9A-Z]{2}/}}NR>FNR{if(/([0-9A-Z]{2}:){5}[0-9A-Z]{2}/~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1}};if(b==1){print $0;if($2~/結(jié)束/){print "";b=0}}}' 1.txt 1.txt >2.txt
   

復(fù)制代碼

wh7211

回復(fù) 8# unix520


文件1大小100M，不匹配MAC，測試結(jié)果如下。代碼3是在代碼2的基礎(chǔ)上，去掉了匹配MAC的部分。代碼3比你提供的代碼效率更高。

代碼3：

1. time awk '/新增/{a=1;c[++b]=$3}a{d[b]=d[b]?d[b]"\n"$0:$0}/結(jié)束/{a=0}END{for(i=1;i<=b;i++){if(c[i]==c[b]){print d[i]"\n">"2"}}}' 1
   
2. 
   
3. real        0m4.508s

復(fù)制代碼

你提供的代碼：

1. time awk 'NR==FNR{if($2~/新增/){a=$3}}NR>FNR{if($3~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1}};if(b==1){print $0;if($2~/ 結(jié)束/){print "";b=0}}}' 1 1 > 2
   
2. 
   
3. real        0m5.537s

復(fù)制代碼

1. awk 'NR==FNR{if($2~/新增/){a=$3}}NR>FNR{if($3~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1}};if(b==1){print $0;if($2~/結(jié)束/){print "";b=0}}}' 1.txt 1.txt >2.txt

復(fù)制代碼

如果按以上代碼思路, 將其修改為匹配MAC格式方法,  請問該如何改呢?

文件1大小100M，按你的需求修改為匹配MAC，測試結(jié)果如下。

1. time awk 'NR==FNR{if($2~/新增/){for(i=1;i<=NF;i++){if($i~/([0-9A-Z]{2}:){5}[0-9A-Z]{2}/){a=$i;break}}}}NR>FNR{for(i=1;i<=NF;i++){if($i~a){d=$0;getline;if($2~/新增/){b=0;next}else{print d;b=1};break}};if(b==1){print $0;if($2~/結(jié)束/){print "";b=0}}}' 1 1 > 2
   
2. 
   
3. real        0m9.927s

復(fù)制代碼

unix520

回復(fù) 9# wh7211

謝謝