讲师中心 微信公众号
AI工具推荐 视频效率加速

利用 Syslog 构建 Linux 运维的实时监控基础设施

轻辰酱_7487

轻辰酱_7487

发布时间:2026-06-18 08:19:43

|

473人浏览过

|

来源于php中文网

原创

Linux Syslog实时监控基础设施的核心是分层设计:①本地采集通过rsyslog/syslog-ng标准化格式、脱敏过滤及磁盘缓冲保障稳定;②TCP/TLS传输确保可靠性与安全性;③syslog-ng预处理结构化后直投Elasticsearch,配合ILM索引管理;④Kibana可视化+ES告警+Webhook自动化响应,形成可观测闭环。

利用 syslog 构建 linux 运维的实时监控基础设施

用 Syslog 构建 Linux 运维的实时监控基础设施,核心不是堆砌工具,而是分层设计:本地采集要稳、传输要可靠、中心处理要可扩展、展示和告警要够快。它不依赖单一软件,而是一套可演进的数据流体系。

本地日志采集与预处理

大多数现代 Linux 系统默认运行 rsyslog 或 syslog-ng,二者都支持结构化输出和轻量过滤。关键在于避免原始日志直接裸奔到网络:

  • 启用日志格式标准化:在 /etc/rsyslog.conf 或 /etc/rsyslog.d/ 下配置 $ActionFileDefaultTemplate RSYSLOG_SyslogProtocol23Format,或在 syslog-ng 中使用 template("${ISODATE} ${HOST} ${PROGRAM} ${MSG}"),确保时间戳、主机名、服务名等字段统一可解析;
  • 做初步脱敏与过滤:比如屏蔽密码字段、丢弃调试级(debug)日志、或只转发 auth.* 和 daemon.err 等关键设施/级别组合,减少无效流量;
  • 启用本地缓冲与重试:rsyslog 的 queue.type="linkedlist" + action.resumeRetryCount="-1",或 syslog-ng 的 disk-buffers,能在网络中断时暂存日志,恢复后自动续传。

可靠日志传输通道

UDP 虽轻量但易丢包,生产环境应优先采用 TCP,并视安全要求叠加 TLS:

Browser Setup (No-Root Linux)
Browser Setup (No-Root Linux)

在无 root/sudo 权限的环境(云容器、VPS、隔离主机)中安装并配置 OpenClaw 浏览器工具的 headless Chrome。适用场景:...

下载
  • 服务端监听配置示例(rsyslog):
    $ModLoad imtcp<br>$InputTCPServerRun 514<br>$DefaultNetstreamDriver gtls<br>$DefaultNetstreamDriverCAFile /etc/rsyslog.d/certs/ca.pem
  • 客户端发送配置示例:
    *.* @@log-server.example.com:6514;RSYSLOG_ForwardFormat(双@表示TCP,6514为常用TLS端口);
  • 若无法部署 TLS,至少启用 TCP 并配合防火墙白名单+源IP限制,避免日志被伪造或泛洪。

中心化处理与结构化入库

Logstash 或 Fluentd 可作为中间处理器,但更推荐 syslog-ng 自身完成大部分预处理,再直投 Elasticsearch:

  • syslog-ng 可内建 JSON 解析(json-parser())、字段提取(csv-parser())、正则重写(rewrite),把 sshd[1234]: Failed password for root 拆成 service: "sshd", event: "login_failure", user: "root";
  • 避免 Logstash 做重复解析:若 syslog-ng 已输出标准 JSON,Logstash 只需用 json { source => "message" } 提取,跳过 grok;
  • Elasticsearch 写入建议使用 ILM(Index Lifecycle Management)策略,按天或按大小滚动索引,防止单索引过大影响查询性能。

可观测性闭环:查询、告警与响应

Kibana 是首选可视化层,但真正形成运维闭环,还需打通告警与执行:

  • 在 Kibana 中用 Lens 或 Dashboard 快速构建 CPU 高负载、SSH 失败暴增、磁盘满等高频场景看板;
  • 用 Elasticsearch Alerting(或第三方如 ElastAlert)设置规则:例如“过去5分钟内 level: ERROR 且 service: nginx 日志超过50条”,触发时发 Slack 或邮件;
  • 告警可进一步对接自动化工具:如通过 Webhook 调用 Ansible Playbook 重启服务,或调用运维平台 API 创建工单。

热门AI工具

更多
UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

3750

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3233

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2333

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

5590

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

5262

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3113

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2625

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2839

2023.07.25

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

0

2026.09.30

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn