针对显存占用但nvidia-smi没有进程

nvidia-smi查看显存被占用无进程ID的处理方法

练了一个服务器，跑代码显示显存不足，nvidia-smi一看发现：发现显存占用严重，却看不到进程的问题，直接kill也kill不掉。

GPU

nvidia-smi 无进程占用GPU，但GPU显存却被占用了

这个命令查询到的进程ID（PID）是 nvidia-smi 自己维护的，而不是操作系统维护的真实进程ID，真实的PID可以通过其他方式（例如使用ps命令）获取。远程服务器，输入nvidia-smi，看到显存使用率（Memory Usage）几乎占满，但，显存利用率（GPU-Util）为0%。使用 pycharm 的 python console 进行调试的时候，调完之后要把进程终止掉，而不是把界面叉掉！显存使用率占满，说明有进程跑完之后，没有释放掉，一直静静地占着地儿。① jupyter不会释放显存。

要在Linux系统上查看NVIDIA GPU的使用情况，您可以使用nvidia-smi命令。这是一个NVIDIA提供的命令行工具，能够显示GPU的各种状态信息，包括但不限于使用率、内存使用情况、温度、时钟速度以及运行在GPU上的进程。nvidia-smi此输出提供了每块GPU的详细状态，包括GPU编号、名称、当前功耗、温度、利用率、已分配的显存和总显存等。同时，底部的“Processes”部分还会列出占用GPU资源的各个进程及其显存使用情况。如果您想更频繁地查看GPU状态，比如每秒查看一次，可以结合。

nvidia-smi是NVIDIA System Management Interface（系统管理接口）简称，是用于查询和管理NVIDIA GPU设备的命令行工具。通过nvidia-smi，用户可以轻松查看GPU的实时状态信息，包括温度、使用率、内存使用情况、显存使用情况、运行中的进程及其对应的GPU资源占用等，是用户管理NVIDIA GPU不可或缺的工具之一。和一般的Linux命令不同的是，该命令需要服务器有nvidia的GPU并安装相应的GPU驱动才能使用。为有相应显卡的服务器的运维和管理提供价值。

解决Ubuntu16.0下NVIDIA命令nvidia-smi出现 No support N/A情况 下载Github补丁包,并解压。 在此感谢 Sam Edwards 提供的CFSworks开源代码 $ cat /proc/driver/nvidia/version 查看nvidia驱动版本，这里是410.48 打开解压的文件夹nvml_fix_master，在该目录下 $ sudo make install TARGET_VER=410.48 libdir=/usr/lib/x86_64-linux-

awk 命令来处理 fuser 的输出，遍历每一行输出，以 "kill -9 " 开头，后面跟着每个进程的PID。常用的查看显卡基本信息的命令 nvidia-smi 发现显存被占用，但是看不到pid进程。kill进程先大概了解一下是那个情况，别到时候把其他人的进程给断了【苦笑】fuser 命令来查找哪些进程正在使用 /dev/nvidia* 文件。可以使用下面的命令，查看详细的pid进程号和占用的显存。

(LINUX)

本文探究nvidia-smi不显示正在使用GPU的进程的原因并予以解决

awk 命令来处理 fuser 的输出，遍历每一行输出，以 "kill -9 " 开头，后面跟着每个进程的PID。直接使用sudo kill pid，kill指定pid进程，本文案例为22131，则为以下命令。当我们使用nvidia-smi查看显卡占用时发现显存被占用，但是看不到pid进程。fuser 命令来查找哪些进程正在使用 /dev/nvidia* 文件。

nvidia-smi NVIDIA-SMI has failed because it couldn’t communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running. step1：sudo apt-get install dkms step2: sudo dkms install -m nvidia -v440.44 再次输入nvidia-smi时，你熟悉的界面就会

Wed Mar 29 19:39:28 2017 +-----------------------------------------------------------------------------+ | NVIDIA-SMI 367.48 Driver Version: 367.48 | |----

一、问题描述：以前GPU都用的好好的，突然今天就用不了，程序无法启用GPU，nvidi-smi命令显示：No running process found 想起中间卸载过重装过tensorflow-cpu版本； 于是卸载重装，仍然无法使用，问题依旧； 然后卸载tensorlfow-gpu版本，然后再重装，再使用就OK了 这说明tensorflow-gpu的使用是非常依赖于tensorflo...

原因：记住记住记住Ctrl+Z是把当前运行程序挂起，并不是终止运行，终止用Ctrl+C,前段时间跑代码测性能和看部分结果一直用的Ctrl+Z，导致程序都处于挂起状态，占用大量内存。jobs -l 显示Linux中的任务列表及任务状态，包括后台运行的任务。ps -ef | grep ‘python’ 命令将显示所有包含 ‘python’ 关键词的进程信息。在系统进程中查找user并且同时包含 “python” 的进程的命令。| 符号是管道操作符，将命令的输出作为另一个命令的输入。