文本去重（删除重复行）

把重复的行删掉，只留下第一次出现的内容，顺序不变，全部在浏览器本地完成。

0 个词 · 0 个字符

结果会显示在这里，修改过的字词以绿色标出。

你的文本不会被保存。核心功能永久免费。

摘要

AdeptWrite 文本去重按“行”比较：内容完全相同的行只保留第一次出现的那一行，其余删除，其他行的顺序保持不变。可以选择是否忽略英文大小写、是否去掉每行前后的空格、是否一并删除空白行，并显示原有行数、已删除的重复行数和结果行数。处理在浏览器本地完成，文字不会上传，免费使用，无需注册账号。

使用方式文本去重（删除重复行）

把每行一条的内容（名单、关键词、网址、词表等）粘贴到文本框。
点击“删除重复”，工具按行比较并去掉重复的行，默认已开启“删除每行前后空格”。
按需勾选“忽略大小写”或“删除空白行”，结果会立即更新。
查看“行数”“已删除的重复行”和结果行数，确认无误后复制结果。

修改前后对照

修改前

张伟李娜王芳张伟李娜赵磊王芳

修改后

张伟李娜王芳赵磊

说明: 默认选项下共 7 行，删除 3 个重复行，结果 4 行。第 5 行“ 李娜”开头多了一个空格，因为默认会先去掉每行前后的空格，所以也被识别为重复；取消“删除每行前后空格”后，它会被当作另一行保留下来。

功能与模式

保留第一次出现的行 — 相同内容只留最先出现的那一行，其余行的先后顺序不变，不会被打乱。
删除每行前后空格 — 默认开启：先去掉每行开头和结尾的空白再比较，所以从表格、网页复制来的名单不会因为多一个空格而漏判。
忽略大小写 — 勾选后，“Apple”和“apple”视为同一行。这个选项只对英文字母有意义，汉字不受影响。
删除空白行 — 勾选后，没有内容的行一并删除，不再只保留一个空行。
显示删除了多少行 — 同时给出原有行数、已删除的重复行数和结果行数，对照数字就能确认处理是否符合预期。

适用对象

整理名单和邮箱

班级名单、活动报名表、客户邮箱从多个表格汇总后常有重复，先去重再核对，避免同一个人被重复通知。

清理关键词和标签表

做内容运营或投放时，从多个来源收集的关键词、话题标签会重复，去重后再分组更省事。

合并参考文献条目

把多个文档里的参考文献合并到一起时，去掉完全相同的条目，再按[参考文献生成器](/zh-hans/citation-generator/)的格式统一整理。

整理词表和网址列表

整理背词表、成语积累、待爬取的网址列表时，快速去掉重复项，也适合在导入电子表格前先清理一遍。

它是怎么判断“重复”的

文本去重只做一件事：把文本拆成一行一行，从上往下看，如果某一行的内容之前已经出现过，就把它删掉。所以它判断的是“整行完全相同”，不是“意思相近”。“北京大学”和“北京大学 ”（末尾多一个空格）算不算同一行，取决于“删除每行前后空格”这个选项；“北京大学”和“北大”则永远是两行。

三个选项

选项	作用	默认
忽略大小写	英文字母不分大小写比较，只对英文有意义	关
删除每行前后空格	先去掉每行开头和结尾的空白再比较，结果里也不保留这些空白	开
删除空白行	没有内容的行全部删除	关

注意一点：如果不勾选“删除空白行”，多个空白行会被当作重复，只保留一个空行。如果你的文本里用空行分隔段落，去重后段落之间只会剩下第一个空行，之后的空行被视为重复而删除，需要的话请先确认这是否是你想要的结果。

与表格去重有什么不同

在 Excel 或 WPS 表格里去重，需要选中数据列、找到“数据”菜单里的“删除重复项”，而且是按单元格或多列组合判断。文本去重面向直接粘贴的文字，一行就是一条，不需要先整理成表格。处理多列数据，或者要按其中某一列去重时，仍然应该用表格软件。

去重前后的几个建议

先统一格式。同一个名字有时带空格、有时是全角空格，可以先用文本清理统一，再去重。
想按拼音整理，去重后再用文本排序。
想把一批词里的某个字统一改掉，用批量查找替换。
去重结果请自己抽查几行。工具只比较文字是否完全相同，不会判断“张伟”和“張偉”是否是同一个人。简体和繁体写法也被视为不同的行。

不会做什么

文本去重不会合并相似的内容，不会改写文字，也不会纠错。它也不是查重工具：想检查一篇文章是否与他人文字相似，请使用在线查重。

常见问题

怎么删除文本里重复的行？

把文字粘贴到文本框，每行一条，点击“删除重复”。内容完全相同的行只保留第一次出现的那一行，其余删除，顺序保持不变。工具同时显示原有行数、已删除的重复行数和结果行数，方便核对。

为什么看起来一样的两行没有被去掉？

常见原因是其中一行多了空格、全角空格或看不见的字符，或者一个是简体、一个是繁体。可以保持“删除每行前后空格”开启，必要时先用文本清理工具处理隐藏字符，再去重。

去重时保留哪一行？

保留从上往下第一次出现的那一行，后面重复的行被删除。如果开启了“忽略大小写”，保留的是第一次出现的原样写法，例如先出现“Apple”后出现“apple”，结果里留下的是“Apple”。

能按姓名去重但保留其他信息吗？

不能。工具只比较整行是否完全相同。如果每行还带着电话、部门等信息，姓名相同但其他内容不同的行不会被去掉。这种情况请在表格软件里按指定列去重。

空行会怎么处理？

不勾选“删除空白行”时，多个空行被当作重复，只保留一个；勾选后，所有空白行都会被删除。如果用空行来分隔段落，请注意这个差别。

文字会上传到服务器吗？

不会。去重在浏览器里完成，文字不发送到服务器，也不会被保存或用于训练。工具在浏览器本地运行，没有处理次数限制，免费使用，不需要注册账号；关闭页面或清空输入框后，内容就不再保留。

文本排序（按拼音）把多行文本按拼音或字母 A–Z、Z–A 排序，或随机打乱。文本清理（去空格空行）去掉多余空格、空行和隐藏格式，整理从网页或 PDF 复制来的文字。批量查找替换在长文本里批量查找和替换词语或正则表达式，全部在浏览器本地完成。词频统计找出文本中出现最多的词语和短语，可隐藏“的、了、是”等常用虚词。