テキスト重複削除

モードとオプションを選び、左にリストを貼り付けると、右に去重結果と統計が表示されます。下で行ごとの状態も確認できます。1回あたり最大 50 万文字。

モード

行ごとに比較し、最初に現れた行を残します。必要に応じて大文字小文字の無視や空白のトリムを切り替えられます。

オプション

大文字小文字を無視

前後の空白を削除

空行を無視

結果の並べ替え

入力

0 行

0 / 500,000

テキストを入力

左の入力欄に複数行を貼り付けると、去重結果とプレビューが入力と同時に表示されます。

使い方

このツールについて

1行1レコードのリスト向けツールです。最初に現れた行を残し、ルールに合致する後続行を重複として扱います。メール・URL・キーワード・一般テキストに対応。すべてブラウザ内で処理され、サーバーには送信されません。

対応シーン

1. 一般テキスト

商品名、タグ、ログなど「1行1項目」の重複削除に使えます。

2. メールリスト

販促・ユーザーデータの整理向け。大文字小文字を無視して比較でき、不正アドレスは別表示です。

3. URL

SEO やデータ整理向け。末尾 `/` や `#fragment` の差を吸収。`?query` の無視も可能です。

4. キーワード

SEO・広告向け。デフォルトは大文字小文字を区別。停用語のみの行はオプションで除外できます。

3ステップで使う

モードを選択（テキスト / メール / URL / キーワード）
内容を貼り付け（1行1項目）
結果を確認し、必要ならコピー

主なオプション

大文字小文字の無視、空白のトリム、空行のスキップ、並べ替え、URL クエリの無視、メール形式チェックなど。

差分プレビュー

残した行は通常表示、重複として統合された行は取り消し線と「重複」ラベルで表示します。

制限

1回あたり最大 50 万文字（行数は1行の長さにより変動）。

よくある質問

Q: テキスト重複削除とは？: A: 重複行を見つけて1件だけ残します。メールリスト、キーワード、URL などのリスト整理に使えます。
Q: 重複行の削除方法は？: A: 1行1項目で入力欄に貼り付けるだけです。重複は自動で検出・削除されます。
Q: メールの重複判定は？: A: 比較前に小文字に統一するため、`Test@Email.com` と `test@email.com` は同一とみなされます。
Q: 不正なメールは削除されますか？: A: いいえ。形式が不正な行は別表示され、確認できます。黙って削除はしません。
Q: URL モードと一般テキストの違いは？: A: 末尾の `/`、`#アンカー`、クエリ（任意）などの差を正規化し、同じページの二重カウントを防ぎます。
Q: URL の ?query（UTM など）を無視できますか？: A: はい。「?query を無視」をオンにすると、例えば次の2つは同一 URL として扱います：
example.com/page?utm=1
example.com/page?utm=2
Q: キーワードは大文字小文字を区別しますか？: A: デフォルトは区別します（`AI` と `ai` は別）。「大文字小文字を無視」で統合できます。
Q: データは保存・アップロードされますか？: A: いいえ。ブラウザ内のみで処理します。下書きは端末の localStorage に保存される場合があります。
Q: 入力できる最大サイズは？: A: 1回あたり最大 50 万文字です。それ以上はリストを分割してください。
Q: 結果をコピーできますか？: A: はい。ワンクリックでコピーし、Excel やドキュメントに貼り付けできます。
Q: 同じに見えるのに去重されない理由は？: A: よくある原因：大文字小文字の違い、見えない空白、URL パラメータの違い（?query 無視がオフ）など。オプションを調整して再実行してください。