文本去重 - 一键去除重复内容

去除重复行、重复词，数据清洗必备工具

输入文本（每行一条数据）

保留原顺序忽略空行区分大小写去除首尾空格

去重结果

功能说明

保留原顺序

勾选后保持数据的原始顺序，只去除重复项；不勾选则会按字母/拼音排序。

区分大小写

勾选后"Apple"和"apple"视为不同内容；不勾选则视为相同，只保留第一次出现的。

去除首尾空格

勾选后"苹果 "和"苹果"视为相同；不勾选则保留原样进行对比。

忽略空行

勾选后自动过滤掉所有空白行，让结果更加整洁。

Excel数据

直接从Excel复制一列数据粘贴即可，每个单元格自动成为一行。

统计功能

去重后显示原始行数、去重后行数和移除的重复行数统计。

Q 如何从Excel复制数据？

A 选中Excel中的一列数据，按Ctrl+C复制，然后在输入框中按Ctrl+V粘贴即可。每个单元格的内容会自动变成一行文本。

Q 去重后顺序会变吗？

A 勾选"保留原顺序"后，数据顺序保持不变，重复项只保留第一次出现的位置。如果不勾选，结果会按字母/拼音升序排列。

Q 能处理多少行数据？

A 本工具在浏览器端处理，通常可以处理几万行数据。如果数据量超过10万行，可能会有些卡顿，建议分批处理。

Q 数据会上传服务器吗？

A 不会。所有处理都在您的浏览器本地完成，数据不会上传到服务器，完全保护您的隐私安全。

Q "Apple"和"apple"算重复吗？

A 取决于"区分大小写"选项。勾选时两者不同，不勾选时视为相同。默认不区分大小写，会保留第一次出现的那个。

Q 如何保存去重结果？

A 点击"复制结果"按钮将结果复制到剪贴板，然后粘贴到Word、Excel、记事本等任意软件中保存即可。