コンテンツにスキップ

テキスト重複削除

ひとことで：雑然とした複数行リストを貼り付けると、重複を除いたユニークな行だけを返し、削除した重複件数も表示します。

こんなときに

  • 商品タイトルや広告を作る前にキーワードリストを整理したいとき
  • 複数のエクスポートをまとめた SKU / ASIN リストの重複を除きたいとき
  • 一斉送信の前にメールアドレスや宛先リストを整えたいとき

入力項目

項目 説明
テキスト 1 行 1 項目の複数行テキスト
空白を除去 前後の空白を取り除き、" sku" と "sku" を同一とみなす
大文字小文字を無視 "SKU-001" と "sku-001" を重複とみなす

出力

  • 重複を除いた行（そのままコピー可能）
  • 削除した重複件数
  • ユニーク行数

使い方

  1. https://www.niceggie.com/tools/text/deduplication を開きます
  2. リストを 1 行 1 項目でテキストボックスに貼り付けます
  3. 必要に応じて 空白を除去 と 大文字小文字を無視 を切り替えます
  4. 重複を除いた結果をコピーし、削除件数とユニーク行数を確認します

重複削除の前にまず空白除去

表計算ソフトからのエクスポートに残る行末の空白やタブは、「同じはずなのに重複として認識されない」最も多い原因です。まず 空白を除去 を有効にし、IDが大文字小文字を区別しない場合は 大文字小文字を無視 も有効にしましょう。

よくある質問

重複削除すると元の並び順は崩れますか？

崩れません。各ユニーク行は最初に出現した位置に保持され、後ろの重複だけが削除されるため、リストの並び順はそのまま維持されます。

空行は削除されますか？

重複する空行は 1 行にまとめられます（空白を除去 が有効な場合は除去されます）。セクション間に意図的に置かれた 1 つの空行はそのまま残ります。

あわせて使う