ソートしないで重複行を削除する - Qiita

uniq コマンドは事前にデータをソートしておく必要がありますが、ソートされていないデータから重複する行を削除したいこともありますよね。そんなときはawk '!a[$0]++' FILEこれだけ…