讲师中心 微信公众号
AI工具推荐 视频效率加速

Python 程序运行指标的采集思路

梦枫小哥_4381

梦枫小哥_4381

发布时间:2026-02-05 18:47:10

|

740人浏览过

|

来源于php中文网

原创

用 psutil 实时获取 Python 进程 CPU 和内存使用率最稳妥,需基于当前 pid 创建 Process 实例;cpu_percent 需两次调用(间隔 0.1–0.5 秒),memory_info().rss 除以 1024² 得 MB;多进程须单独采集;应通过守护线程+队列缓存指标,避免阻塞主逻辑;Prometheus 导出推荐用 prometheus_client,定义带 pid/name 维度的 Gauge;禁用 time.time() 测耗时,优先选 process_time 或 perf_counter;异步场景下仍有效,但需注意上下文损耗;聚焦 CPU、RSS、线程数、GC 四项核心指标。

python 程序运行指标的采集思路

Python 进程 CPU 和内存使用率怎么实时获取

直接用 psutil 是最稳的选择,它跨平台、开销低、API 清晰。别自己去读 /proc/pid/stat 或调用 os.popen('top'),既难维护又容易出兼容问题。

关键点:必须基于当前进程的 pid 构造 psutil.Process() 实例,否则拿到的是系统全局值。

  • process.cpu_percent(interval=0.1):首次调用会返回 0,需至少调用两次(间隔 >0)才有效;interval 太小(如 0.01)会导致精度失真,推荐 0.1–0.5 秒
  • process.memory_info().rss 返回字节数,除以 1024**2 转 MB;注意 vms(虚拟内存)在容器中常失真,优先看 rss
  • 如果程序是多进程,每个子进程需单独采集,父进程调用 psutil.Process(child_pid),不能复用主进程对象

如何避免指标采集拖慢主业务逻辑

指标采集本身有 I/O 和计算开销,尤其 cpu_percent() 依赖两次采样间隔,阻塞式调用会卡住主线程。

arcgis-js
arcgis-js

提供 ArcGIS Maps SDK for JavaScript 开发辅助,涵盖 2D/3D 地图视图、图层管理、数据可视化、空间分析等功能模块的参考和示例指导。

下载
  • 用独立线程周期性采集,通过 threading.Thread(daemon=True) 启动,避免阻碍主程序退出
  • 用 queue.Queue 缓存最新一次采集结果,业务代码只做非阻塞读取,不参与采集过程
  • 不要在 HTTP 请求处理函数或数据库事务里实时调用 psutil —— 这类路径延迟敏感,应读缓存值
  • 容器环境(如 Docker)中,psutil.sensors_temperatures() 等硬件接口不可用,提前判断 hasattr(psutil, 'sensors_temperatures') 再调用

指标数据怎么结构化导出供监控系统消费

Prometheus 是最常见目标,但 Python 原生不支持暴露指标端点,得靠 prometheus_client 库补足。

立即学习“Python免费学习笔记(深入)”;

  • 定义指标前先想清楚维度:比如 python_process_cpu_percent{pid="1234", name="worker"} 比单纯 python_cpu_percent 更有用
  • 用 Gauge 类型存瞬时值(CPU、RSS),用 Counter 记累计量(如请求总数、异常次数)
  • 避免高频 .set():每秒更新一次即可,Prometheus 抓取频率通常为 15s,更密反而浪费
  • 若不用 Prometheus,输出 JSON 到标准输出也行,但字段名统一用小写+下划线(如 mem_rss_bytes),方便 Logstash 或 Fluentd 解析

为什么 time.time() 不适合做耗时指标的基准

它只反映 wall-clock 时间,无法区分 CPU 占用、I/O 等待、GIL 阻塞等真实瓶颈,导致指标误导性很强。

  • 用 time.process_time() 测纯 CPU 执行时间(不含 sleep、I/O 等等待)
  • 用 time.perf_counter() 测端到端耗时(含等待),但要注意:它在系统休眠后可能跳变,不适合长期运行服务的“总运行时”统计
  • 真正要定位性能热点,得结合 cProfile 或 py-spy,而不是靠外围采集的平均值
  • 异步场景(asyncio)下,process_time 仍有效,但要注意事件循环切换带来的上下文损耗,单次 await 的耗时意义有限
采集不是越全越好,重点盯住 CPU、RSS、线程数、GC 次数这四个硬指标;其余像磁盘 I/O、网络连接数,只在对应模块启用时才打开采集开关——否则只是给监控系统喂噪音。

热门AI工具

更多
SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

超级麦吉

一款通过数字员工协作完成调研、数据分析与文档制作的AI办公平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2195

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

3462

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

1156

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

3979

2025.09.10

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

3188

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

5109

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3829

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

466

2026.01.19

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

20

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn