sed命令的一個問題

zhiwen1002

首先看一下命令：sed 's/.*"data":"\(.*\)",.*/\1/g' 文件
文件內(nèi)容大致如下：{"filename":"/local/iso/hello.txt","filesize":"104857600","data":"aaaaaaaaa==","offset":"0"}
命令的目的就是取出data相應(yīng)字段的值，也就是aaaaaaaaa==
上面這些是不會有問題的，但是如果data相應(yīng)的字段很長，長到有100M左右的時候，上個命令顯示的結(jié)果就是全部都顯示出來了，而不是data的字段內(nèi)容。
在這求助大家，希望大家不吝賜教，謝謝大家了！

jason680

回復(fù) 1# zhiwen1002

How about those

$ perl -lane '{print $1 if(m/"data":"(.+?)"/)}' FILE
aaaaaaaaa==

$ grep -oP '(?<="data":")[^"]+' FILE
aaaaaaaaa==

   

zhiwen1002

回復(fù) 2# jason680

非常感謝你的解答，試了grep是可以的解決問題的，再次感謝。
問題解決了但是還是想知道根源，就是為什么我上面的sed不行，100M的文件也不是很大啊。


   

jason680

回復(fù) 3# zhiwen1002

$ echo '{"filename":"/local/iso/hello.txt","data":"aaaaaaaaa==","offset":"0","filesize":"104857600"}' | sed 's/.*"data":"\(.*\)",.*/\1/g'
aaaaaaaaa==","offset":"0

$ echo '{"filename":"/local/iso/hello.txt","data":"aaaaaaaaa==","offset":"0","filesize":"104857600"}' | sed 's/.*"data":"\([^"]*\)".*/\1/g'
aaaaaaaaa==

   

Shell_HAT

但是如果data相應(yīng)的字段很長，長到有100M左右的時候

1、整個文件只有一行嗎？
2、如果文件是從Windows系統(tǒng)里面復(fù)制過來的，需要先轉(zhuǎn)換成unix格式：

1. dos2unix test.txt

復(fù)制代碼

zhiwen1002

回復(fù) 4# jason680

嗯，這個是貪婪的問題，但是這是你修改文件內(nèi)容出現(xiàn)的問題
打印實際上是這樣的
......AAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA==","offset":"0"}
前面很多A，文件有100M多。即使按照你那樣的[^]，最后結(jié)果還是一樣，就是想不明白，grep是可以的。


   

zhiwen1002

回復(fù) 5# Shell_HAT
只有一行，不是windows的文件，里面沒有特殊的字符，都是可視的


   

jason680

回復(fù) 6# zhiwen1002

Is it sed version issue?
There is no issue with sed version 4.2.1 on Ubuntu LTS 12.04


$ wc FILE
       1        1 10000070 FILE

$ head -c 80 FILE
{"filename":"/local/iso/hello.txt","data":"aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa

$ tail -c 80 FILE
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa==","offset":"0"}

$ sed 's/.*"data":"\(.*\)",.*/\1/g' FILE > NEW

$ wc NEW
       1        1 10000012 NEW

$ head -c 80 NEW
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa

$ tail -c 80 NEW
aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa==

$ sed --version
GNU sed version 4.2.1
...

tuyajie

只有我沒看懂題目嗎？