讲师中心 微信公众号
AI工具推荐 视频效率加速

如何使用NVIDIA Nsight分析c++ CUDA程序的性能? (GPU Profiling)

夏丽吖_6386

夏丽吖_6386

发布时间:2026-01-28 10:19:32

|

636人浏览过

|

来源于php中文网

原创

nsight-compute(ncu)比nvprof更适合现代CUDA性能分析,因其支持Turing及更新架构、提供kernel级底层指标,而nvprof在CUDA 11.0+中已被弃用且不支持Ampere等新架构。

如何使用nvidia nsight分析c++ cuda程序的性能? (gpu profiling)

为什么 nsight-compute 比 nvprof 更适合现代 CUDA 性能分析

因为 nvprof 已在 CUDA 11.0+ 中被标记为 deprecated,且不支持 Ampere 及更新架构(如 A100、RTX 4090)的完整指标采集。实际 profiling 时若看到 Unsupported GPU architecture 或关键指标(如 s__inst_executed、dram__bytes_read)为空,基本就是 nvprof 失效了。

推荐直接用 nsight-compute(命令行工具 ncu),它原生支持所有 Turing 及之后架构,并能精确到 kernel launch 级别采集指令吞吐、内存带宽、warp 指令分发等底层数据。

  • ncu 默认只采样单个 kernel;加 --set full 才能拿到完整指标集(含 L2、DRAM、Tensor Core 利用率)
  • 若程序含多个 kernel,用 --kernel-id all 或 --kernel-name ".*copy.*" 过滤目标 kernel
  • 避免在 X11 图形会话下运行 —— 容易触发 NCU: Error: CUresult driver error: 999 (CUDA_ERROR_UNKNOWN),改用 TTY 或 ssh -X 后加 export DISPLAY= 显式指定

如何用 ncu 快速定位 memory-bound kernel

大多数性能瓶颈不在计算,而在显存带宽或延迟。用 ncu 跑一次 baseline,重点看三组比率:

  • lts__t_sectors.sum.average.pct_of_peak_sustained_elapsed:L2 缓存扇区读写占峰值带宽百分比
  • dram__bytes.sum.per_second:实际 DRAM 带宽(GB/s),对比卡标称值(如 A100 PCIe 是 1555 GB/s)
  • sm__sass_thread_inst_executed_op_ld.sum 和 sm__sass_thread_inst_executed_op_st.sum:load/store 指令数,比值明显偏离 1:1 说明访存模式不均衡

如果 dram__bytes.sum.per_second 接近硬件上限但算力利用率(sm__inst_executed)很低,大概率是 global memory 访问未合并 —— 检查 kernel 中数组索引是否满足 threadIdx.x * sizeof(float) 对齐,以及是否用了 __ldg() 提升只读缓存命中。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

立即学习“C++免费学习笔记(深入)”;

ncu --set full --kernel-id all --metrics sm__inst_executed,sm__sass_thread_inst_executed_op_ld,sm__sass_thread_inst_executed_op_st,dram__bytes.sum.per_second,lts__t_sectors.sum.average.pct_of_peak_sustained_elapsed ./my_cuda_app

为什么 nsight-systems(nsys)不能替代 ncu

nsys 是 timeline 工具,擅长看 CPU-GPU 协同、kernel 启动间隔、memory copy 与 compute 的重叠程度;但它不提供每个 kernel 的 micro-architectural 指标。两者不是互斥,而是互补。

  • 先用 nsys record -t cuda,nvtx ./my_app 看整体 timeline,确认是否存在 host 等待、kernel launch 频次过高、或 memcpy 占用过多时间
  • 再用 ncu 针对 timeline 中耗时最长的 1–2 个 kernel 做深度分析
  • 若 nsys 显示 kernel duration 很短(ncu 报告高 latency,可能是 kernel 内部有 divergent branch 或大量 __syncthreads(),需结合 --metrics sms__warps_launched,sms__inst_executed 看 warp 利用率

常见 ncu 错误及绕过方法

实际跑 ncu 时最常遇到三类失败:

  • NCU: Error: CUresult driver error: 700 (CUDA_ERROR_LAUNCH_OUT_OF_RESOURCES):kernel 占用太多寄存器或 shared memory,导致无法启动 profiling context。加 --launch-skip 跳过首次 launch,或用 --unified-memory-profiling off 关闭 unified memory tracking
  • NCU: Error: Profiling is not supported on this device:当前 GPU 不在 ncu --list-gpus 输出中,检查是否用的是 vGPU、Tesla 模式未启用(nvidia-smi -i 0 -c 3)、或驱动版本太旧(至少需要 R460+)
  • 输出中大量指标为 - 或 0:默认采样集太轻量,必须显式指定 --set full 或自定义 --metrics,不能依赖默认行为

真正难的从来不是跑出数据,而是理解 sm__inst_executed_op_fadd_pred_on.sum 和 sm__inst_executed_op_fmul_pred_on.sum 的比值为何偏离理论 FMA 比例 —— 这往往指向 kernel 中隐式的类型转换或编译器未展开的循环。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

相关专题

更多
css中float用法
css中float用法

css中float属性允许元素脱离文档流并沿其父元素边缘排列,用于创建并排列、对齐文本图像、浮动菜单边栏和重叠元素。想了解更多float的相关内容,可以阅读本专题下面的文章。

6567

2024.04.28

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

764

2025.10.23

scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

989

2023.10.18

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2960

2023.10.25

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

60

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

40

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

40

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

20

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

20

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
uni-app从入门到实战教程
uni-app从入门到实战教程

共0课时 | 0人学习

uni-app x harmony开发指南
uni-app x harmony开发指南

共0课时 | 0人学习

uni-app鸿蒙运行和发行
uni-app鸿蒙运行和发行

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn