我的sed為何非常慢，是否有什么配置文件？

lcz88990200

sed "s/~^/\n/g"   file1
file1文件是從表中bcp出來的，記錄用~^分隔，字段以!$分隔，整個文件就一個長串，大約有200萬條記錄，文件大小約500M，
我的suse linux9系統(tǒng)內(nèi)存為8G，共享內(nèi)存2G，但執(zhí)行上面這個命令10多個小時都沒結(jié)束。
我試了一下100行的文件很快就執(zhí)行成功了。
我的sed為何非常慢，是否有什么配置文件？

L_kernel

你是打印結(jié)果，看看直接編輯文件如何？-i參數(shù)。

既然你的字段和記錄都是這么標(biāo)準(zhǔn)的分隔了，為什么不用awk處理呢？

lcz88990200

@L_kernel記錄不是定長的，awk是否可以指定記錄分隔符？

lcz88990200

現(xiàn)在要對此文件進(jìn)行分析，有沒有其它更好的辦法？
此文件是上級行發(fā)的，不然bcp出來時直接用~^作記錄分隔符多好。苦�。。。�

blackold

try:

1. awk -v RS='~\\^' 1 urfile

復(fù)制代碼

lcz88990200

@blackold謝謝。

blackold

lcz88990200 發(fā)表于 2012-10-25 10:13
@blackold謝謝。

行嗎？

waker

如果除了~^連用之外沒有使用這兩個字符,目測用tr最快

L_kernel

lcz88990200 發(fā)表于 2012-10-25 09:11
@L_kernel記錄不是定長的，awk是否可以指定記錄分隔符？

當(dāng)然可以的。RS這個變量。

lcz88990200

awk -v RS='~\\^' 1 urfile
已經(jīng)OK了，謝謝。


用RS='~^'不行，RS='~\\^' 就可以了