問一個關于過濾文本文件的問題。

lizhenjia

1.txt :
        1,2
        2,3
        3,4
     2.txt:
        1,2
如何得到,在1.txt文件中存在,但在2.txt中不存在的文本行呢？(1.txt,2.txt的數(shù)據(jù)量非常大,數(shù)萬條)
我用cat 1.txt | grep -v $(cat 2.txt),不好使，提示:
bin/bash: /usr/bin/grep: The parameter or environment lists are too long,如何實現(xiàn)呢？

dong_1997

用awk等命令編輯成insert語句插入到表中，用sql不就搞定了。

yoursmile

那就用更原始的方法，循環(huán)來grep.

lizhenjia

用數(shù)據(jù)庫肯定是可以解決的，不過太麻煩了，能否有比較簡單的方法呢？

admirer

原帖由 "lizhenjia" 發(fā)表：
1.txt :
        1,2
        2,3
        3,4
     2.txt:
        1,2
如何得到,在1.txt文件中存在,但在2.txt中不存在的文本行呢？(1.txt,2.txt的數(shù)據(jù)量非常大,數(shù)萬條)
我用cat 1.txt | grep -v $(cat 2.tx..........

   

1. comm -23 f1 f2

復制代碼

bjgirl

[quote]原帖由 "admirer"][/quote 發(fā)表：
     
還是版主厲害呢!我也用comm實驗了半天,就沒有想到-23這樣的用法!

yoof

-23 是什么參數(shù)？

bjgirl

[quote]原帖由 "yoof"]-23 是什么參數(shù)？[/quote 發(fā)表：
     
comm命令是逐行比較已經(jīng)排序好的文件.
他的格式:comm [-1|-2|-3] leftfile rightfile
-23的意思是說不顯示僅在rightfile中有的行而且也不顯示在leftfile文件,rightfile文件中都存在的行,,

admirer

原帖由 "bjgirl"] [quote:14419bb5a6="yoof" 發(fā)表：
寫到:
-23 是什么參數(shù)？

comm命令是逐行比較已經(jīng)排序好的文件.
他的格式:comm [-1|-2|-3] leftfile rightfile
-23的意思是說不顯示僅在rightfile中有的行而且也不顯示在leftfile文件,rightfile文件中都存在的行,, [/quote]
對！
-13:就是只顯示第二個文件特有的行
-23:就是只顯示第一個文件特有的行

yoursmile

原帖由 "bjgirl" 發(fā)表：
   
還是版主厲害呢!我也用comm實驗了半天,就沒有想到-23這樣的用法!

   

linux 真是博大精深啊。
還有comm這個命令，我是第一次聽說。

你們都厲害啊。