[Linux] sort と uniq をパイプでつないで重複行を削除する


メールアドレスの一覧などから重複したものを削除したくて、どうやるのが一番カンタンかいくつか考えてみたところ Linux コマンドでやるのがお手軽そうなので sort と uniq をパイプでつないで重複行を削除しました。

ソートして重複行を削除するコマンドの例

$ sort original.txt | uniq > sorted_unique.txt

凝ったことをしないなら、Excel使ったり、LL言語でちょろっとコード書くより、Linuxコマンドを使った方が楽ですね。

参考情報

Linuxコマンド集 – 【 uniq 】 ソート済みのファイルから重複した行を削除する:ITpro

Linuxコマンド集 – 【 sort 】 行を並び替える:ITpro

  1. コメントはまだありません。

  1. トラックバックはまだありません。