重複行を削除

仕組み

リストの重複を取り除くのは、ちょっとした作業ですがしょっちゅう発生します。メールアドレス、商品コード、タグ、ログの行など、書き出して連結したものなら何でもです。こうしたリストには実際のデータが含まれていることが多く、出所の分からないWebサイトに貼り付けないほうがよい理由になります。

重複と見なされるもの

デフォルトでは、先頭と末尾のスペースを無視したうえで、1文字ずつ完全に同じ場合にのみ、2つの行が一致すると見なします。この空白の扱いは見かけ以上に重要です。書き出したリストには末尾のスペースがついていることが多く、見た目が同じ行でも違うものになってしまいます。

大文字・小文字を無視

メールアドレス、タグなど、本来は大文字・小文字を区別しないものにはオンにしてください。コード、パスワード、識別子など、大文字・小文字に意味があるものにはオフのままにしてください。

順序

デフォルトでは元の順序が保たれ、各行の最初の出現が残ります。順序が重要でなく読みやすさが重要な場合のために、アルファベット順の並べ替えも用意されています。

空行

空行は1つにまとめられるのではなくそのまま残るので、段落の区切りや意図的な間隔は保たれます。