网页建设与网站设计,临清网站制作,网站建设怎么进后台,做啪啪网站2023年02月23日
问题描述#xff1a;Pycharm远程服务器跑代码时#xff0c;不小心把Pycharm关掉了#xff0c;但服务器代码还在运行#xff1f;
解决办法#xff1a;kill进程
先用watch -n 0.5 nvidia_smi查看进程#xff0c;然后kill -9 进程
1、nvidia-smi…2023年02月23日
问题描述Pycharm远程服务器跑代码时不小心把Pycharm关掉了但服务器代码还在运行
解决办法kill进程
先用watch -n 0.5 nvidia_smi查看进程然后kill -9 进程
1、nvidia-smi介绍
nvidia-sim简称NVSMI提供监控GPU使用情况和更改GPU状态的功能是一个跨平台工具支持所有标准的NVIDIA驱动程序支持的Linux和WindowsServer 2008 R2 开始的64位系统。这个工具是N卡驱动附带的只要装好驱动就会有这个命令
查看nvidia
nvidia-smi
实时检测nvidia
watch -n 0.5 nvidia-smi
每0.5秒更新一次
表格参数详解 GPU**本机中的GPU编号有多块显卡的时候从0开始编号
Fan风扇转速0%-100%N/A表示没有风扇
NameGPU类型图上GPU的类型是Tesla T4
TempGPU的温度GPU温度过高会导致GPU的频率下降
PerfGPU的性能状态从P0最大性能到P12最小性能图上是P0
Persistence-M持续模式的状态持续模式虽然耗能大但是在新的GPU应用启动时花费的时间更少图上显示的是off
PwrUsager/Cap能耗表示Usage用了多少Cap总共多少
Bus-IdGPU总线相关显示domainbusdevice.function
Disp.ADisplay Active 表示GPU的显示是否初始化
Memory-Usage显存使用率
Volatile GPU-UtilGPU使用率
Uncorr. ECC关于ECC的东西是否开启错误检查和纠正技术0/disabled,1/enabled
Compute M计算模式0/DEFAULT,1/EXCLUSIVE_PROCESS,2/PROHIBITED Processes显示每个进程占用的显存使用率、进程号、占用的哪个GPU
框住的即为进程数
2、隔几秒刷新一下显存状态nvidia-smi -l 秒数
隔两秒刷新一下GPU的状态
nvidia-smi -l 2 将监控结果写入文件并且指定写入文件的监控字段
nvidia-smi -l 1 --formatcsv --filenamereport.csv --query-gputimestamp,name,index,utilization.gpu,memory.total,memory.used,power.draw
-l隔多久记录一次命令中写的是1
–format结果记录文件格式是csv
–filename: 结果记录文件的名字
–query-gpu记录哪些数据到csv文件
timestamp时间戳
memory.total显存大小
memory.total显存使用了多少
utilization.gpuGPU使用率
power.draw显存功耗对应PwrUsage
3、上面是显存监控中常用的几个命令如果还有什么参数想了解可以通过
nvidia-smi -h
命令查看
如果想调整结果记录文件的字段可以通过下面的命令查看对应的字段
nvidia-smi --help-query-gpu
要列出所有可用的 NVIDIA 设备请运行
nvidia-smi -L
以 1 秒的更新间隔监控整体 GPU 使用情况
nvidia-smi dmon
