linux下操作文件以分隔符切割並去重

文件格式

如何過濾一下IP地址，並去重

ip - 時間 - 內容
ip2 -時間 - 內容
ip3 -時間 - 內容
ip4 -時間 - 內容
ip5 -時間 - 內容 
...

code

cat access.log |awk -F '-' '{print $1}'|sort|uniq

釋義

• cat file // 輸出全文件
• awk -F 'seprator' // 指定分隔符切割
• '{print $1}' //只輸出切割后的第一個值
• sort //對內容排序
• uniq // 相鄰行去掉重復

效果