重複行削除

テキスト内の重複した行の2つ目以降を削除し、並び順を保ったまま整理します。
複数のリストを結合したあとの重複除去や、ログから重複エントリを取り除くときに使えます。
変換・集計はこのブラウザ内で実行します。

最初の出現順を保って重複を除く

同じ内容の行が繰り返されるリストから、2回目以降の行を取り除きます。並べ替えは行わず、最初に出現した項目の順番を維持します。

基本的な使い方

  1. 1行に1項目ずつ並べたリストを貼り付け、「重複行を削除」を押します。
  2. 残った項目の順番と内容を確認し、重複を除いたリストをコピーします。

入力例と結果

離れた位置にある重複も削除

入力

りんご
みかん
りんご
ぶどう

結果

りんご
みかん
ぶどう

処理の仕様

  • 行全体が完全一致した場合だけ重複と判定します。大文字小文字、全角半角、前後の空白は区別します。
  • LF・CRLF・CRで行を分け、出力はLFでつなぎます。空行も1つの行として扱い、最初の空行だけを残します。

注意点

「Apple」と「apple」、「りんご」と末尾にスペースがある「りんご 」は別の行です。必要な場合は先に表記や空白をそろえてください。

よくある利用場面

複数の一覧を結合した後のURLリスト、商品コード、キーワード候補の重複整理に向いています。

関連ツール