真正可用的MySQL主从延迟告警必须满足识别真假延迟、过滤瞬时抖动、覆盖线程中断三个条件,推荐用pt-heartbeat端到端测量,或自建脚本+Prometheus多指标联合判断。

MySQL 主从延迟实时告警不能只靠单次查 Seconds_Behind_Master 就发通知,那样容易误报。真正可用的方案必须满足三个条件:能识别真假延迟、能过滤瞬时抖动、能覆盖线程中断等异常场景。
用 pt-heartbeat 做端到端真实延迟测量
这是目前最可靠的方式。它在主库定时写入带时间戳的心跳记录,从库读取并计算差值,完全绕开 MySQL 自身状态的缺陷(比如 SQL 线程卡死时 Seconds_Behind_Master 会“冻结”)。
- 主库建表(InnoDB 引擎):
CREATE TABLE percona.heartbeat (ts TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, file VARCHAR(255), position BIGINT UNSIGNED, server_id INTEGER UNSIGNED) ENGINE=InnoDB; - 主库启动心跳写入:
pt-heartbeat --daemonize --update --user=monitor --password=xxx --host=master-ip --interval=1 - 从库轮询检查(每 5 秒):
pt-heartbeat --monitor --user=monitor --password=xxx --host=slave-ip --master-server-id=1 --interval=5 - 输出结果直接是毫秒级延迟值,可直接用于告警判断,比如超过 3000 毫秒就触发
脚本监控需连续采样 + 多状态校验
如果暂时无法部署 pt-heartbeat,自建脚本必须规避常见坑点:
- 不能只取一次
Seconds_Behind_Master值;至少每 10 秒采集一次,连续 3 次 ≥60 秒才告警 - 遇到
NULL时,必须同时检查Slave_IO_Running和Slave_SQL_Running是否都为Yes,否则是复制已断,不是延迟 - 解析输出要用字段名精确匹配:
awk -F ': ' '/^Seconds_Behind_Master:/ {print $2}' | tr -d '[:space:]',避免因 MySQL 版本导致字段错位 - 对非数字做兜底:
[[ "$delay" =~ ^[0-9]+$ ]] || delay=0,防止比较时报错
接入 Prometheus 实现可视化+智能告警
单纯脚本难持续跟踪趋势,推荐用 Prometheus 生态:
- 通过
mysqld_exporter抓取指标,但注意:mysql_slave_status_seconds_behind_master本质仍是Seconds_Behind_Master的直译,不能单独设阈值告警 - 应同时采集:
—mysql_slave_status_slave_io_running和mysql_slave_status_slave_sql_running(布尔型)
—mysql_slave_status_seconds_behind_master
—mysql_slave_status_relay_log_space_bytes(中继日志积压量) - Prometheus 告警规则示例:
(mysql_slave_status_seconds_behind_master > 60 and mysql_slave_status_slave_io_running == 1 and mysql_slave_status_slave_sql_running == 1) or (mysql_slave_status_slave_io_running == 0 or mysql_slave_status_slave_sql_running == 0) - 配合 Grafana 可画出延迟趋势+线程状态+中继日志增长曲线,一眼看出是传输慢还是回放慢
告警渠道和阈值设置要贴合业务
告警不是越快越好,关键是要减少无效打扰:
- 阈值建议按业务容忍度设:强一致性场景(如支付)设 5 秒;报表类可设 300 秒
- 告警方式优先走企业微信/钉钉机器人,附带关键上下文:
— 当前延迟值
— IO/SQL 线程状态
— 中继日志大小
— 最近一条Last_IO_Error或Last_SQL_Error - 避免每分钟轮询;脚本或 exporter 采集间隔建议 15~30 秒,既及时又不增加负载
- 主从切换后,务必自动更新监控目标 IP 和
--master-server-id参数,否则持续误报


















