Python数据延迟监控核心是定期检查时间戳与当前时间差值超阈值即告警，支持MySQL等多源，需明确定义延迟、设缓冲阈值、加异常处理与冷却机制。
Python实现数据延迟监控，核心是定期检查数据时间戳与当前时间的差值，一旦超出阈值就告警。不依赖复杂框架，用基础库就能快速落地。
明确延迟定义和监控目标
延迟不是“数据没来”，而是“该来的数据晚到了”。比如：数据库每5分钟写入一条最新订单记录，那么最新记录的update_time距当前时间若超过6分钟，就判定为延迟。
- 确认数据源类型：MySQL、Kafka、API接口、本地文件、Redis等
- 确定关键时间字段：如created_at、event_time、log_timestamp
- 设定合理阈值：比业务容忍上限多留10%缓冲（如业务要求≤5分钟，监控设为5.5分钟）
编写基础检测逻辑（以MySQL为例）
用pymysql或sqlalchemy连库查最新时间，计算差值：
# 示例：检查orders表最新更新时间
import pymysql
from datetime import datetime, timedelta
<p>def check_delay():
conn = pymysql.connect(host='xxx', user='xxx', password='xxx', db='xxx')
cursor = conn.cursor()
cursor.execute("SELECT MAX(update_time) FROM orders")
latest_time = cursor.fetchone()[0]
conn.close()</p><pre class="brush:php;toolbar:false;">if not latest_time:
return "无数据"
delay_seconds = (datetime.now() - latest_time).total_seconds()
threshold = 330 # 5.5分钟 = 330秒
return delay_seconds > threshold, delay_seconds
HR面试评价助手-Word版
下载
🎯 HR面试评价助手（Word版格式） 生成可直接复制到Word文档的标准格式HR面试评价 【使用方式】 1. 发送口令：HR面试评价 2. 粘贴JD文字 3. 上传简历文档 4. 上传面试记录（可选） 5. 复制生成的评价到Word 【输出特点】 - 纯文本格式，可直接粘贴到Word - 层次清晰，标题加粗...
立即学习“Python免费学习笔记（深入）”；
加入周期执行与告警机制
用schedule库定时运行，触发微信/邮件/钉钉通知：
- 安装：pip install schedule requests
- 每2分钟检查一次：schedule.every(2).minutes.do(check_delay)
- 延迟时调用告警函数：send_alert(f"订单数据延迟 {delay}s")
- 告警建议含关键信息：数据源、字段名、当前延迟、最近时间戳、跳转链接（如Grafana面板）
增强稳定性与可观测性
生产环境不能只靠“跑着就行”：
- 加异常捕获：数据库连不上、SQL报错、空结果都需日志记录
- 记录检测历史：写入本地CSV或轻量SQLite，方便回溯趋势
- 暴露健康端点：起一个Flask小服务，GET /health 返回{"status":"ok","delay":12.3}
- 避免重复告警：加冷却机制，如“同一延迟状态10分钟内不重复通知”
基本上就这些。不复杂但容易忽略细节——关键是把“什么是延迟”想清楚，再让代码忠实地反映它。
