使用說明
工具說明
文字去重工具(Text Deduplicator)面向清單型內容清洗:每一行視為一筆記錄,保留首次出現的行,將後續相同(在所選規則下)的行標為重複。快速清理重複內容,讓你的清單更乾淨、更好用。
無論是電子郵件清單、URL 連結、關鍵字,還是一般文字,只要貼上內容,即可一鍵去重。所有處理都在瀏覽器本機完成,無需註冊,也不會上傳任何資料。支援離線使用,適合處理敏感資料(如客戶信箱、內部資料等)。
支援的使用情境
1. 一般文字去重
適用於任何「每行一筆」的內容,例如:
- 商品名稱
- 標籤清單
- 日誌資料
工具會自動保留每筆內容的第一次出現,刪除後續重複項。
2. 電子郵件清單去重
專為電子郵件行銷與使用者資料清洗設計:
- 自動忽略大小寫(如 `Test@Email.com` = `test@email.com`)
- 自動辨識重複電子郵件
- 無效電子郵件會單獨標記,方便你檢查,而不會被直接刪除
適合整理訂閱使用者、客戶名單等。
3. URL 連結去重
用於清理重複網頁連結,特別適合 SEO 與資料整理:
工具會自動處理常見差異,例如:
- `/page` 與 `/page/` 視為相同
- 忽略頁面錨點(`#section`)
亦可選擇是否忽略參數(如 `?utm=xxx`),避免同一頁面被重複統計。
4. 關鍵字去重
適用於 SEO、廣告投放或內容規劃:
- 支援大小寫區分(預設)
- 可開啟「忽略大小寫」統一去重
協助你快速整理關鍵字清單,避免重複投放或內容衝突。
簡單 3 步完成去重
- 選擇對應的使用情境(文字 / 電子郵件 / URL / 關鍵字)
- 貼上你的內容(每行一筆)
- 自動完成去重,立即查看結果
你還可以:
- 查看哪些內容被刪除(清楚標示)
- 一鍵複製去重結果
- 查看統計資料(總數 / 保留 / 刪除)
彈性選項(可選)
你可依需求開啟或關閉以下功能:
- 忽略大小寫(統一內容格式)
- 去除空白(避免格式造成重複)
- 忽略空行(維持結果乾淨)
- 排序結果(A–Z 或 Z–A)
- URL 去參數(適合 SEO 資料清洗)
- 電子郵件格式檢查(辨識無效地址)
大多數情況下,預設設定已足夠使用。
視覺化差異預覽
所有處理都是透明的:
- 保留的內容正常顯示
- 被刪除的重複項會加刪除線,並標記為「重複」(`dup`)
你可以清楚看到每一筆變化,不必擔心誤刪。
使用限制
目前單次最多約 500,000(50 萬)字元,便於大批量電子郵件、網址或關鍵字清單去重;極端超長內容仍建議分段處理。