讲师中心 微信公众号
AI工具推荐 视频效率加速

strace -p 发现进程卡在 read/writev/fsync 怎么继续深挖

星晨姑娘_9445

星晨姑娘_9445

发布时间:2026-01-17 22:31:01

|

986人浏览过

|

来源于php中文网

原创

进程卡在read/writev/fsync时,需分层定位阻塞点:先用带-s -yy -v选项的strace分析调用上下文与fd路径,再逐层检查文件系统、块设备、NFS或pipe/socket状态,结合/proc/PID/stack、perf和dmesg等内核视角工具确认等待原因,并排除ext4日志、XFS log满、NFS hard mount超时及硬件故障等常见陷阱。

strace -p 发现进程卡在 read/writev/fsync 怎么继续深挖

进程卡在 read/writev/fsync,说明它正阻塞在 I/O 操作上,但具体卡在哪一层(内核、设备、文件系统、存储介质),需要分层定位。不能只看 strace 输出,得结合上下文和系统状态交叉验证。

确认阻塞调用的完整上下文

strace -p 默认只显示系统调用入口,看不到参数细节和返回值。重新运行时加关键选项:

  • strace -p $PID -s 1024 -yy -v -e trace=read,writev,fsync,openat,close:-s 看长路径,-yy 显示文件描述符对应的真实路径,-v 显示结构体细节(比如 iovec 数组内容、fsync 的 fd 信息)
  • 观察调用前是否刚打开某个文件?fd 对应什么路径?是否是普通文件、设备、socket、pipe 或 /proc 下的特殊文件?
  • 注意 writev 的 iovec 长度和总字节数,判断是否在写大 buffer;fsync 是否针对一个刚写入大量数据的文件?

检查该 I/O 目标的状态和瓶颈点

拿到 fd 对应的路径后,逐层排查目标资源:

  • 如果是普通文件:ls -l /path/to/file 看属主、权限、挂载点;df -h /mount/point 和 findmnt -D /mount/point 查文件系统类型(ext4/xfs/btrfs)、挂载选项(如是否带 sync、barrier、noatime)
  • 如果是块设备(如 /dev/sdb1)或裸设备:cat /proc/diskstats 看该设备的 I/O 等待(第10列)和平均队列长度;iostat -x 1 观察 %util、await、r_await/w_await、avgqu-sz
  • 如果是网络文件系统(NFS/CIFS):mount | grep nfs 查挂载参数(如 hard/nfsvers=3);rpcinfo -p $server 和 showmount -e $server 辅助判断服务端是否响应
  • 如果是 pipe/fifo/socket:lsof -p $PID 看对端进程是否存在、是否已关闭读端/写端;ss -tulpn | grep :port 查 socket 状态

用内核视角看 I/O 堆栈和等待原因

strace 只看到用户态阻塞,真正卡在哪要进内核栈看:

  • 用 sudo cat /proc/$PID/stack(需开启 CONFIG_STACKTRACE)看当前内核函数调用链。若停在 __wait_event_common、wait_on_page_bit_common、blk_mq_wait_dispatch_queued、nfs_wait_on_request 等,可直接定位到等待类型(页锁、块层队列、NFS 请求)
  • 用 perf record -p $PID -e 'syscalls:sys_enter_*' -- sleep 5 抓 syscall 进入事件,再 perf script 分析高频阻塞点
  • 对 fsync 卡死特别有用:echo 1 > /proc/sys/vm/block_dump(临时)+ dmesg -w,可看到内核级 flush 日志,暴露 journal 等待、journal 提交卡住等问题(ext4 常见)

排除常见陷阱和配置问题

很多“卡住”其实是配置或环境导致的假性阻塞:

  • ext4 + data=ordered + 大量小文件写入:fsync 会触发 journal 提交 + 元数据刷盘,极易被 dirty page 回写拖慢。查 /proc/sys/vm/dirty_* 和 grep -i "dirty" /proc/mounts
  • XFS 日志满或 log device 卡住:xfs_info /mount/point 查 log size;xfs_logprint -c /dev/logdev(慎用)看日志状态;iostat 看 log device 是否高 await
  • NFS hard mount + 服务端宕机:客户端会无限重试,默认超时长达数分钟。用 timeout 10 ls /nfs/path 测试是否真卡死
  • 磁盘硬件故障或 RAID 降级:smartctl -a /dev/sdX、cat /proc/mdstat、dmesg | grep -i "error\|ata\|nvme"

热门AI工具

更多
UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

869

2023.10.18

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2360

2023.10.25

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

3934

2025.06.09

golang结构体方法
golang结构体方法

本专题整合了golang结构体相关内容,请阅读专题下面的文章了解更多。

4091

2025.07.04

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

4607

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2108

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

4607

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2108

2023.08.10

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

20

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn