文字去重

選擇情境與選項,在左側輸入或貼上清單,右側即時顯示去重結果與統計;下方可檢視每一行的保留或重複狀態。單次輸入上限約 50 萬字元,適合大批量電子郵件等清單。

情境模式

逐行比較,預設保留首次出現的行。可按需開啟忽略大小寫、去除空白等選項。

選項

結果排序

輸入

0 行

0 / 500,000

請輸入文字

在左側輸入框中貼上或輸入多行內容,將即時顯示去重結果與預覽。

使用說明

工具說明

文字去重工具(Text Deduplicator)面向清單型內容清洗:每一行視為一筆記錄,保留首次出現的行,將後續相同(在所選規則下)的行標為重複。快速清理重複內容,讓你的清單更乾淨、更好用。

無論是電子郵件清單、URL 連結、關鍵字,還是一般文字,只要貼上內容,即可一鍵去重。所有處理都在瀏覽器本機完成,無需註冊,也不會上傳任何資料。支援離線使用,適合處理敏感資料(如客戶信箱、內部資料等)。

支援的使用情境

1. 一般文字去重

適用於任何「每行一筆」的內容,例如:

  • 商品名稱
  • 標籤清單
  • 日誌資料

工具會自動保留每筆內容的第一次出現,刪除後續重複項。

2. 電子郵件清單去重

專為電子郵件行銷與使用者資料清洗設計:

  • 自動忽略大小寫(如 `Test@Email.com` = `test@email.com`)
  • 自動辨識重複電子郵件
  • 無效電子郵件會單獨標記,方便你檢查,而不會被直接刪除

適合整理訂閱使用者、客戶名單等。

3. URL 連結去重

用於清理重複網頁連結,特別適合 SEO 與資料整理:

工具會自動處理常見差異,例如:

  • `/page` 與 `/page/` 視為相同
  • 忽略頁面錨點(`#section`)

亦可選擇是否忽略參數(如 `?utm=xxx`),避免同一頁面被重複統計。

4. 關鍵字去重

適用於 SEO、廣告投放或內容規劃:

  • 支援大小寫區分(預設)
  • 可開啟「忽略大小寫」統一去重

協助你快速整理關鍵字清單,避免重複投放或內容衝突。

簡單 3 步完成去重

  1. 選擇對應的使用情境(文字 / 電子郵件 / URL / 關鍵字)
  2. 貼上你的內容(每行一筆)
  3. 自動完成去重,立即查看結果

你還可以:

  • 查看哪些內容被刪除(清楚標示)
  • 一鍵複製去重結果
  • 查看統計資料(總數 / 保留 / 刪除)

彈性選項(可選)

你可依需求開啟或關閉以下功能:

  • 忽略大小寫(統一內容格式)
  • 去除空白(避免格式造成重複)
  • 忽略空行(維持結果乾淨)
  • 排序結果(A–Z 或 Z–A)
  • URL 去參數(適合 SEO 資料清洗)
  • 電子郵件格式檢查(辨識無效地址)

大多數情況下,預設設定已足夠使用。

視覺化差異預覽

所有處理都是透明的:

  • 保留的內容正常顯示
  • 被刪除的重複項會加刪除線,並標記為「重複」(`dup`)

你可以清楚看到每一筆變化,不必擔心誤刪。

使用限制

目前單次最多約 500,000(50 萬)字元,便於大批量電子郵件、網址或關鍵字清單去重;極端超長內容仍建議分段處理。

常見問題

Q: 什麼是文字去重工具?

A: 文字去重工具可以自動辨識並刪除重複內容,只保留唯一一筆。常用於清理清單型資料,例如電子郵件、關鍵字或連結。

Q: 如何去除重複行?

A: 只要將內容貼到輸入框中,每行一筆,工具會自動偵測並刪除重複項,無需額外操作。

Q: 電子郵件去重是如何判斷重複的?

A: 工具會先統一為小寫再比較,因此:`Test@Email.com` 與 `test@email.com` 會被視為同一個信箱。

Q: 無效電子郵件會被刪除嗎?

A: 不會。格式不正確的電子郵件會單獨標示,方便你手動檢查,而不會直接遺失。

Q: URL 去重和一般文字有什麼差別?

A: URL 去重會自動處理常見格式差異,例如:

  • 是否帶 `/`
  • 是否包含 `#錨點`
  • 是否包含參數(可選)

這樣可以避免同一個頁面被重複計算。

Q: 是否支援去除 URL 參數(如 utm)?

A: 支援。你可以開啟「忽略 ?query 參數」,這樣類似:

  • example.com/page?utm=1
  • example.com/page?utm=2

會被視為同一個連結。

Q: 關鍵字去重會區分大小寫嗎?

A: 預設會區分,例如:`AI` 與 `ai`;若開啟「忽略大小寫」,它們會被合併。

Q: 工具會儲存或上傳我的資料嗎?

A: 不會。所有處理都在你的瀏覽器中完成,不會上傳或儲存任何資料。若您未清除網站資料,草稿可能儲存在本機瀏覽器的 localStorage 中,方便下次繼續編輯。

Q: 可以處理多大的文字?

A: 單次輸入上限為 500,000(約 50 萬)個字元,達到上限後將無法繼續輸入;若仍超出,請將清單分段處理。

Q: 去重後可以匯出結果嗎?

A: 可以。你可以一鍵複製結果,貼到 Excel、文件或其他工具中。

Q: 為什麼有些內容看起來一樣但沒有被去重?

A: 可能原因包括:

  • 大小寫不同(未開啟忽略大小寫)
  • 存在隱藏空白或符號
  • URL 參數不同(未開啟忽略 query)

可以嘗試調整選項後再處理。