讲师中心 微信公众号
AI工具推荐 视频效率加速

Sublime如何快速提取所有唯一行?(去重操作技巧)

星辰君_9469

星辰君_9469

发布时间:2026-02-21 09:57:01

|

257人浏览过

|

来源于php中文网

原创

Sublime Text需先排序再用正则^(s*.+)$\n^\1$删除相邻重复行,且须统一换行符;大文件或需保序时推荐shell或Python方案。

sublime如何快速提取所有唯一行?(去重操作技巧)

Sublime Text 里没有内置“去重”功能,得靠正则 + 排序组合实现

Sublime Text 本身不提供“删除重复行”或“提取唯一行”的原生命令,Sort Lines 只能排序,不能去重。直接选中所有内容后点 Sort Lines,重复行依然保留——这是最常被误以为有效的操作。

真正可行的路径是:先排序,再用正则匹配相邻重复行并删掉其中一份。这个流程依赖两个关键动作,缺一不可。

  • Sort Lines(菜单:Edit → Line Operations → Sort Lines)——必须先做,否则正则无法识别“相邻重复”
  • 正则替换:^(s*.+)$ ^$ 替换为 ,需开启 Regular Expression 和 Match Whole Line(即勾选 . 和 ^$ 按钮)
  • 重复执行该替换,直到替换数为 0(因为一次只能删掉每组重复中的一个副本)

正则表达式 ^(s*.+)$ ^$ 的实际含义和限制

这个正则只匹配“完全相同的两行紧挨着”的情况,s* 允许开头有空格或制表符,.+ 匹配非空行内容, ^$ 确保下一行和上一行文本(含空白)一字不差。

它不处理以下情况:

  • 三行及以上连续重复(如 A、A、A),一次只能消掉中间那个 A,得手动多点几次替换
  • 行尾空格/换行符差异(比如一行末尾多一个空格),会被视为不同行,正则不匹配
  • 大小写混杂(Apple 和 apple)默认不视为重复,除非开启 Case Sensitive 并手动关掉(但关了又会影响字母顺序排序)
  • 空行会被跳过,因为 .+ 不匹配空行;若需保留一个空行,得另加规则

替代方案:用 Python 或 shell 命令更可靠,尤其处理大文件

当行数超过几千、或需要严格按首次出现顺序保留唯一行(而非排序后去重)时,Sublime 内置方法就力不从心了。这时直接调外部工具反而更快。

  • 在 Sublime 中全选内容 → 右键 → Copy,然后粘贴到终端执行:pbpaste | sort -u | pbcopy(macOS)或 xclip -o | sort -u | xclip -i(Linux)
  • 想保持原始顺序?用 Python 一行:pbpaste | python3 -c "import sys; seen = set(); [print(l, end='') for l in sys.stdin if not (l in seen or seen.add(l))]" | pbcopy
  • 注意:sort -u 是字节序排序去重,和 Sublime 的 Unicode 排序结果可能不一致;Python 方案无排序,纯按输入顺序
  • Sublime 插件 Text Pastry 或 Advanced CSV 都不解决去重,别白装

容易被忽略的细节:行尾符不统一会导致去重失败

如果你的文本混合了 (Unix)、 (Windows)甚至 (old Mac),那么 ^(s*.+)$ ^$ 中的 就无法匹配 ,正则直接失效。

解决办法很简单,但很多人跳过:

  • 先统一换行符:菜单 Edit → Line Endings → 选 Unix (LF) 或 Windows (CRLF)
  • 或者在正则替换时把 改成 R(Sublime 支持的通用换行符语法),即用 ^(s*.+)$R^$
  • 但注意:R 在某些旧版 Sublime(如 3.2 之前)不支持,会报错;建议升级到最新 Stable 版

去重这事,表面是点几下鼠标,背后全是边界条件。顺序、空白、换行符、重复长度——漏掉任何一个,结果就不是你想要的那“唯一”了。

作者最新文章

yandex入口

2026-11-05 16:11

yandex首页

2026-11-05 16:13

Yandex.tm引擎首页

2026-11-05 16:15

Yandex.tm搜索引擎

2026-11-05 16:17

Yandex引擎首页

2026-11-05 16:19

Yandex官网网页版

2026-11-05 16:21

Yandex.tm引擎入口

2026-11-05 16:22

热门AI工具

更多
切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

相关专题

更多
js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

4796

2023.06.20

正则表达式不包含
正则表达式不包含

正则表达式,又称规则表达式,,是一种文本模式,包括普通字符和特殊字符,是计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列匹配某个句法规则的字符串,通常被用来检索、替换那些符合某个模式的文本。php中文网给大家带来了有关正则表达式的相关教程以及文章,希望对大家能有所帮助。

3261

2023.07.05

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

9102

2023.07.05

java正则表达式匹配字符串
java正则表达式匹配字符串

在Java中,我们可以使用正则表达式来匹配字符串。本专题为大家带来java正则表达式匹配字符串的相关内容,帮助大家解决问题。

812

2023.08.11

正则表达式空格
正则表达式空格

正则表达式空格可以用“s”来表示,它是一个特殊的元字符,用于匹配任意空白字符,包括空格、制表符、换行符等。本专题为大家提供正则表达式相关的文章、下载、课程内容,供大家免费下载体验。

520

2023.08.31

Python爬虫获取数据的方法
Python爬虫获取数据的方法

Python爬虫可以通过请求库发送HTTP请求、解析库解析HTML、正则表达式提取数据,或使用数据抓取框架来获取数据。更多关于Python爬虫相关知识。详情阅读本专题下面的文章。php中文网欢迎大家前来学习。

693

2023.11.13

正则表达式空格如何表示
正则表达式空格如何表示

正则表达式空格可以用“s”来表示,它是一个特殊的元字符,用于匹配任意空白字符,包括空格、制表符、换行符等。想了解更多正则表达式空格怎么表示的内容,可以访问下面的文章。

406

2023.11.17

正则表达式中如何匹配数字
正则表达式中如何匹配数字

正则表达式中可以通过匹配单个数字、匹配多个数字、匹配固定长度的数字、匹配整数和小数、匹配负数和匹配科学计数法表示的数字的方法匹配数字。更多关于正则表达式的相关知识详情请看本专题下面的文章。php中文网欢迎大家前来学习。

739

2023.12.06

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

0

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn