Sublime Text 无原生保序去重功能，Remove Duplicate Lines 仅删相邻重复行，因其实现为逐行比对而非哈希查重；可靠方案是正则 ^(.*$)\n(?=.*^\1$) 配合 . matches newline，或大文件时用 awk '!seen[$0]++'。

Sublime Text 没有“一键定位并删除所有重复行”的原生命令——Remove Duplicate Lines 只删相邻重复，Sort Lines: Unique 必然打乱顺序，真要保序删重（比如清理 import 列表或 API 响应体），必须用正则预查配合手动清理。

为什么 Remove Duplicate Lines 根本定位不了非相邻重复？

它不是扫描全文，而是逐行比对「当前行是否和上一行完全一致」。比如这三行：

apple
banana
apple

第二个 apple 不会被识别为重复，因为它的上一行是 banana。它不建哈希表、不缓存历史、不回溯，也不高亮、不提示。

• 对尾部空格、\t、\u200B（零宽空格）极度敏感："abc" 和 "abc " 算两行
• 混用 \r\n 和 \n 时，^/$ 锚点失效，匹配直接崩
• 未全选时，只处理光标所在段落，不是全文
• 大小写不归一：Apple 和 apple 永远不会被合并

用 ^(.*$)\n(?=.*^\1$) 真实高亮所有后续重复行

这是 Sublime 原生支持的唯一可靠方式：靠向后预查（(?=.*^\1$)）判断某行是否在后续还会出现，只匹配「后面还有相同行」的实例（首行跳过）。

• 先统一换行符：菜单 → File → Line Endings → Unix（否则 ^ 和 $ 错位）
• 打开查找面板（Ctrl+F），勾选 Regular Expression 和 Whole Line
• 右下角点 .* 图标启用 . matches newline（否则多行内容无法跨行匹配）
• 输入：^(.*$)\n(?=.*^\1$) → 点 Find All
• 按 Ctrl+Shift+L 转多光标 → 按 Delete 删除所有高亮行

若仍有残留，大概率是尾部空白干扰：先 Find → Replace，查找 \s+$，替换为空，再重跑正则。

大文件（>5 万行）或含复杂格式时别硬扛内置正则

Sublime 的正则引擎在大文本中会卡顿、假死，且无法中断。此时应切到终端，用更鲁棒的工具：

• 保序去重（留第一处）：awk '!seen[$0]++'（自动忽略 BOM、兼容混合换行符）
• 带空格归一化：awk '{gsub(/^[ \t]+|[ \t]+$/, ""); if (!$0) next} !seen[$0]++'
• 忽略大小写：awk '{low = tolower($0); if (!seen[low]++) print}'
• 处理完粘贴回 Sublime 即可（无需插件、不卡顿、结果确定）

真正容易被忽略的是：正则里那个 . matches newline 开关——漏点它，\n 就不参与匹配，整个预查逻辑直接失效；而大文件卡住时，很多人反复调参数，却忘了换外部命令才是更稳的路径。