VSCode 正则删除重复行终极指南：排序法与插件方案详解
VSCode 如何用正则表达式一次性删除所有重复行（仅保留首行）
直接给出核心解决方案：利用 VSCode 内置的查找替换功能（快捷键 Ctrl+H）配合正则表达式实现高效去重是可行的，但必须遵循一个关键步骤——**预先对文本行进行排序，否则正则只能删除紧邻的重复行**。
其根本原因在于 VSCode 的正则引擎不支持跨行回溯匹配。因此，类似 ^(\S.*$)\n(?=.*^\1$) 这种旨在直接匹配非相邻重复行的复杂表达式在 VSCode 中无效。最可靠、通用的操作流程是经典的“先排序，后删除相邻重复”两步法。
- **第一步：排序文本行**。全选内容，按下
Ctrl+Shift+P打开命令面板，输入并执行Sort Lines（确保此功能已启用）。 - **第二步：启用正则替换**。打开替换面板（
Ctrl+H），点击.*按钮启用正则表达式模式。 - **第三步：输入正则表达式**。在查找框中输入：
^(.*$)\n\1$，替换框留空。 - **第四步：执行全部替换**。点击“全部替换”按钮，即可删除所有内容完全相同且相邻的下一行。
需要注意的技术细节：表达式中的 \1 引用的是上一行捕获的完整内容。默认换行符为 \n。若在 Windows 系统下处理 CRLF（即 \r\n）格式的文件，建议先在编辑器右下角将行尾序列转换为 LF，以确保正则匹配成功。
高效插件推荐：Duplicate Line Remover 与 Unique Lines
若希望保留原始行序或觉得手动排序繁琐，安装专用插件是更高效的选择。实测表明，Unique Lines（作者 larryzhao）的稳定性和准确性通常更佳。而 Duplicate Line Remover 在处理包含首尾空格或制表符的行时，偶尔可能出现误判。
- **安装与使用**：安装
Unique Lines后，全选文本，通过Ctrl+Shift+P打开命令面板，输入并执行Unique Lines: Remove Duplicates。 - **去重逻辑**：该插件默认保留每组重复行中首次出现的行，并进行严格的字符比对（包括首尾空白字符）。因此，它不会将“123”和“ 123”（前含空格）误判为重复。
- **处理空格**：如需在比较时忽略首尾空格，需先用
Trim Trailing Whitespace等命令预处理文本，插件本身不提供模糊匹配选项。
从实现原理看，这类插件通常通过计算每行的哈希值并利用 Set 数据结构去重，处理万行以内的文本性能良好。当行数超过五万时，VSCode 主进程可能出现短暂卡顿，这主要源于编辑器自身在大规模批量操作时的性能限制。
为何不推荐使用「查找全部」功能手动删除？
许多用户尝试通过 Ctrl+F 搜索某行内容，点击“查找全部”高亮所有匹配项后手动删除。这其实是一个误区。VSCode 的“查找全部”功能仅用于定位匹配项的起始位置，**它既不会自动选中整行，也无法智能识别“首次出现”与“后续重复”**。
- **匹配范围问题**：搜索“apple”会高亮所有包含该子串的位置（如“apple pie”、“pineapple”），这并非我们所需的“整行完全重复”。
- **整行选中缺失**：即使使用
^apple$精确匹配，高亮部分仍是单词本身，无法一键选中包含该词的整行内容进行删除。 - **操作繁琐易错**：依赖手动多选删除，在重复行较多时极易漏选或误删，且无法保证“仅保留首行”的核心需求。
因此，对于去重场景，“查找全部”属于功能错配，效率低下且结果不可靠。
处理 CSV 及带分隔符数据时的注意事项
处理 CSV 等结构化数据时需格外谨慎，直接应用上述方法可能导致逻辑错误。例如，不同行中仅某一列值相同（如多个“John”），可能被误判为整行重复而删除。
- **明确去重维度**：首先确定是删除整行完全相同的行，还是仅针对特定列去重。
- **选用专业工具**：若需按列去重，建议使用更专业的工具，如 Python 的 pandas 库（
pandas.drop_duplicates(subset=['col'])）或命令行 awk（awk -F, '!seen[$1]++' file.csv）。 - **预处理数据**：即使进行整行去重，也建议先将数据导出为纯文本，用制表符等统一分隔符替代逗号，再在 VSCode 中操作。
另一个常见陷阱是文件编码问题。VSCode 默认使用 UTF-8 编码。若文件实际编码为 GBK 或 ISO-8859-1，可能导致正则或插件比对出错，出现“视觉相同却无法删除”的情况。遇到此问题，请检查编辑器右下角显示的编码，必要时使用“Reopen with Encoding”功能以正确编码重新加载文件。
