怎样使用 awk 删掉文件中重复的行
该技巧来自知乎https://zhuanlan.zhihu.com/p/96934479
要保持原来的排列顺序删掉重复行，使用：
awk '!visited[$0]++' your_file > deduplicated_file
该技巧来自知乎https://zhuanlan.zhihu.com/p/96934479
要保持原来的排列顺序删掉重复行，使用：
awk '!visited[$0]++' your_file > deduplicated_file