讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux 日志分析:Syslog 配合 ELK 系统架构

雨芳吖_6367

雨芳吖_6367

发布时间:2026-08-15 10:37:26

|

519人浏览过

|

来源于php中文网

原创

Syslog与ELK是互补协作关系:Syslog(如rsyslog)负责标准化采集与可靠转发,ELK负责集中存储、深度解析与可视化分析;需通过TCP/UDP或omelasticsearch打通数据链路,并用Filebeat或Logstash清洗日志。

linux 日志分析:syslog 配合 elk 系统架构

Linux 日志分析中,Syslog 与 ELK 并非替代关系,而是天然互补的协作组合:Syslog 负责日志的标准化采集与初步路由,ELK 负责集中存储、深度解析与交互式分析。关键在于打通两者的数据通路,并合理分工。

Syslog 作为 ELK 的可靠日志入口

Syslog(尤其是 rsyslog)是 Linux 系统最成熟、最稳定的日志转发层。它不直接参与分析,但承担着“守门人”角色——统一接收 kernel、auth、daemon 等各类本地日志,按规则过滤、格式化,并安全地推送到 ELK 生态。

  • rsyslog 可通过 omelasticsearch 模块直连 Elasticsearch,适合轻量级场景;更常见的是配置为 TCP/UDP 输出到 Logstash 或 Filebeat 监听端口(如 514 或自定义端口)
  • 务必启用 $ActionFileDefaultTemplate RSYSLOG_ForwardFormat 或使用 template 定义 JSON 格式输出,避免 Logstash 解析时字段丢失
  • 对远程传输启用 TLS 加密和队列缓存(queue.filename),防止网络抖动导致日志丢失

ELK 各组件如何承接 Syslog 数据

从 Syslog 流入的数据需经 ELK 各环节协同处理,才能发挥价值:

Linux installer
Linux installer

先解析安全源,运行本地CLI安装、启动、卸载Linux桌面应用。用户请求时使用。

下载
  • Elasticsearch 接收结构化日志后,自动识别 @timestamp、host、syslog_facility、syslog_severity 等字段,支持按服务类型(如 auth)、严重等级(err)、时间范围快速检索
  • Logstash 或 Filebeat 承担关键清洗任务:用 Grok 解析传统 syslog 格式(如 %{SYSLOGTIMESTAMP:timestamp} %{SYSLOGHOST:host} %{DATA:program}(?:\[%{POSINT:pid}\])?: %{GREEDYDATA:message}),提取 IP、用户、操作动作等语义字段
  • Kibana 中可基于 syslog_program 创建服务维度看板,用 syslog_severity 设置告警阈值(例如连续 5 条 emerg 级日志触发通知)

典型部署链路与配置要点

一条稳定高效的路径是:系统日志 → rsyslog(本地收集+TCP转发) → Filebeat(轻量接收+JSON增强) → Elasticsearch → Kibana。该链路兼顾性能与可控性。

  • rsyslog 配置示例(/etc/rsyslog.d/90-elk.conf):
    *.* @10.0.1.20:5044;RSYSLOG_SyslogProtocol23Format
  • Filebeat 输入监听 UDP/TCP 5044,启用 decode_syslog 插件自动解析 RFC5424 标头,无需手写 Grok
  • 在 Elasticsearch 中为 syslog 索引设置生命周期策略(ILM),热数据保留 7 天、冷数据归档至低成本存储,避免磁盘撑爆

为什么不用 journald 直连 ELK?

systemd-journald 虽然集成度高,但二进制格式与 ELK 生态兼容性弱。若必须使用,推荐通过 journalctl -o json 实时导出或部署 Journalbeat(专为 journald 设计的 Beats),而非让 Logstash 直接读取二进制日志文件——后者易因 journal 文件轮转而丢日志。

热门AI工具

更多
超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

3890

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3333

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2473

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

5970

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

5622

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3293

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2805

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

3019

2023.07.25

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

0

2026.10.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn