讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux文本处理命令解析_Linux grep与awk综合用法讲解

酷瑶大大_7908

酷瑶大大_7908

发布时间:2025-12-22 23:05:22

|

666人浏览过

|

来源于php中文网

原创

grep负责快速筛选匹配行,awk负责按字段处理、计算和格式化输出;二者组合可高效解决日志分析、配置提取等实际问题。

linux文本处理命令解析_linux grep与awk综合用法讲解

Linux 中 grep 和 awk 是文本处理的两大利器,它们分工明确又常配合使用:grep 负责“找”,快速筛选匹配行;awk 负责“拆”和“算”,按字段处理、计算、格式化输出。掌握二者组合用法,能高效解决日志分析、配置提取、数据清洗等实际问题。

grep 基础与精准过滤技巧

grep 默认逐行匹配正则,但很多场景需要更稳更准:

  • -w 匹配完整单词(如 grep -w 'error' 不会误中 errors 或 enderror)
  • -E 启用扩展正则(等价于 egrep),支持 |、+、? 等,例如 grep -E 'fail|error' /var/log/syslog
  • -v 反向筛选,排除干扰行(如 grep -v '^#|^$' 去掉注释和空行)
  • -n 显示行号,便于定位;-o 仅输出匹配部分(适合提取IP、邮箱等片段)

awk 核心能力:分字段、取内容、做计算

awk 默认以空白(空格/制表符)为分隔符,用 、… 引用字段,<p>awk 默认以空白(空格/制表符)为分隔符,用 <code>$1、$2… 引用字段,$0 表示整行:

表示整行:

Json Repair Kit
Json Repair Kit

使用 Node.js 评估修复格式错误的 JSON,自动纠正尾随逗号、单引号、未加引号的键等常见问题,实现文件规范化。

下载
  • 打印第2列且第3列大于100:awk '$3 > 100 {print $2}' data.txt
  • 统计某列出现次数:awk '{count[$1]++} END {for (i in count) print i, count[i]}' access.log
  • 自定义分隔符(如冒号):awk -F':' '$3 >= 500 {print $1}' /etc/passwd
  • 内置变量 NF(字段数)、NR(当前行号)很实用,比如跳过首行:awk 'NR>1 {print $1,$3}' file.csv

grep + awk 协同实战:从日志中精准提取关键信息

单独用一个命令往往不够,组合才能应对复杂需求。典型流程是:grep 快速缩小范围 → awk 精细提取或加工:

  • 查 nginx 错误日志中状态码为 500 的请求URL:grep ' 500 ' /var/log/nginx/error.log | awk '{print $7}'
  • 提取所有 IPv4 地址并去重计数:grep -oE '([0-9]{1,3}\.){3}[0-9]{1,3}' access.log | awk '{ip[$0]++} END{for (i in ip) print i, ip[i]}'
  • 筛选含关键词且满足数值条件的行(先 awk 再 grep 更高效):awk '$5 > 200 {print $0}' app.log | grep 'timeout'

避坑提醒:常见误区与替代建议

组合使用时容易忽略细节,导致结果不准或效率低下:

  • grep 默认区分大小写,需加 -i 才匹配 Error 和 error
  • awk 中正则匹配用 ~(如 $2 ~ /abc/),等于号 == 是字符串全等,别混淆
  • 大量数据时,优先用 awk 过滤再处理,比 grep 后管道传给 awk 更快(减少进程开销)
  • 若需更强大字段处理(如 JSON、CSV),可考虑 jq 或 csvkit,但 grep+awk 已覆盖 80% 终端日常需求

基本上就这些。熟练后你会发现,一条简洁的管道命令,就能替代几十行 Python 脚本——不复杂,但容易忽略细节。

热门AI工具

更多
VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

403

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3767

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

6545

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

581

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1496

2024.07.09

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

3978

2024.08.07

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

122

2026.01.13

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

517

2026.01.13

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

40

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn