讲师中心 微信公众号
AI工具推荐 视频效率加速

LinuxShell处理日志_日志分析脚本实战

陌静同学_6289

陌静同学_6289

发布时间:2026-03-04 12:58:03

|

445人浏览过

|

来源于php中文网

原创

Linux Shell脚本是轻量高效日志分析工具:用grep -E定位错误、awk+sort+uniq统计访问与状态码、awk数值过滤提取慢请求、sed/awk按时间范围截取日志。

linuxshell处理日志_日志分析脚本实战

Linux Shell 脚本是日志分析最轻量、最直接的工具——不需要额外安装复杂平台,一条命令就能筛选、统计、定位问题。关键在于理清目标:查错误?看访问频次?找慢请求?还是提取特定字段?脚本写法就完全不同。

快速定位错误行(grep + 正则)

大多数日志中,ERROR、WARN、Exception 是关键信号。用 grep -E 同时匹配多种模式,加上行号和上下文更易排查:

grep -n -E "(ERROR|WARN|Exception|Traceback)" app.log
grep -A 2 -B 1 -i "connection refused" nginx/error.log

注意大小写(-i)、显示前后几行(-A/-B),避免漏掉堆栈或请求ID等关联信息。如果日志带时间戳,可加 awk '{print $1,$2,$3}' 快速提取时间列辅助判断集中发生时段。

统计访问来源或响应状态(awk + sort + uniq)

Nginx 或 Apache 的 access.log 适合用 awk 提取字段再聚合。例如统计 Top 10 访问 IP:

awk '{print $1}' access.log | sort | uniq -c | sort -nr | head -10

统计 HTTP 状态码分布:

awk '{print $9}' access.log | sort | uniq -c | sort -nr

注意:字段编号取决于日志格式(Nginx 默认 $1 是 IP,$9 是 status;若用了自定义 log_format,需先确认字段位置)。遇到带引号或空格的字段(如 request 字段),可用 awk -F'"' '{print $2}' 按双引号分割更稳妥。

提取耗时超阈值的请求(awk 数值过滤)

假设日志最后一列是响应时间(毫秒),要找出 >2000ms 的请求并打印完整行:

Linux Ai Server
Linux Ai Server

Linux AI 服务器 — 将 Linux 服务器转换为本地 AI 推理集群。使用 systemd、NVIDIA CUDA 实现无头 Linux AI,零 GUI 开销。

下载

awk '$NF > 2000' app.log

如果响应时间在固定列(比如第 12 列),明确写列号更安全:

awk '$12 > 2000 {print $0}' access.log

配合 tail -f 实时监控慢请求:tail -f app.log | awk '$NF > 3000',适合上线后快速感知性能异常。

按时间范围截取日志(sed 或 awk 时间匹配)

当只需分析某几分钟的日志(比如故障窗口),用 sed 定位起止行最高效:

sed -n '/2024-05-20 14:25:/, /2024-05-20 14:30:/p' app.log

如果时间格式不规整(含毫秒或时区),awk 更灵活:

awk '$0 ~ /2024-05-20 14:[25-29]:[0-5][0-9]/' app.log

注意:正则中的时间范围要覆盖实际日志格式(如是否含秒、是否用 24 小时制),测试时先用 head -20 看几行样本再写匹配模式。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4150

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3513

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2733

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

6650

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

6302

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3653

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

3145

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

3379

2023.07.25

Playwright 测试失败怎么办
Playwright 测试失败怎么办

Playwright测试失败专题汇集超时、定位器匹配、浏览器提前关闭、依赖与插件配置、文件上传、SSL及Docker启动等故障文章,并介绍通过截图、报告和Trace定位错误。

0

2026.10.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn