nvitop

nvitop GPU 交互式监控

补充说明

nvitop 是 Python 编写的 GPU 监控工具，界面类似 htop，能显示 GPU 利用率、显存、温度、功耗和进程树，适合交互式排查和多卡环境。

常用示例

安装：

pip install nvitop

启动交互界面：

nvitop

只监控指定 GPU：

CUDA_VISIBLE_DEVICES=0,1 nvitop

以监控模式输出：

nvitop -m

查看进程树：

nvitop -m full

导出一次快照：

nvitop --once

易错点与排错

• 容器内没有驱动或权限，nvitop 启动后看不到 GPU。
• nvitop 依赖的 nvidia-ml-py 版本与驱动不兼容，报初始化错误。
• 多用户共享 GPU 时，普通用户可能看不到其他用户的进程信息。
• 只关注显存不看利用率，可能漏掉 CPU 数据加载瓶颈。
• MIG 实例需要对应的设备可见性配置，否则显示不完整。
• 在非交互环境使用 nvitop 会占用终端，脚本场景改用 --once。