Linux文件合並去重

1.取兩個文件的交集

cat file1 file2 | sort | uniq -d > file3

 

2.刪除兩個文件的交集

cat file1 file2 | sort | uniq -u > file3

 

3.取兩個文件的並集

cat file1 file2 | sort | uniq > file3

 

4.去除一個文件中的重復行

sort file1 | uniq > file2
注：這里把重復的行統一為一行

sort file1 | uniq -u > file2
注：這里把所有重復的行全部刪掉了，一行不留