zoukankan      html  css  js  c++  java
  • 有时候用nvidia-smi看不到进程但是内存都满了,可能是有些进程没有kill

    最近遇见很尴尬的问题,这几天GPU一直是很满的状态 但是我又看不见进程nvidia-smi,如下:

     因为我目前正在用2跑代码,我发现23占内存一样,好嘛那我就有理由相信问题是我了,可能是我没有杀死进程,悄咪咪的要在被发现之前解决这个问题才行,并且不能断掉我自己现在跑了很久的2的代码!

    网上有的答案是用fuser,

    fuser -v /dev/nvidia*

    但是我不想再装了,于是找到了一个更简单的方法!

    ps aux|grep root|grep python

    出来的结果如下,好家伙不愧是我!果然是我!但是我不记得是哪个该杀死了,好在目前正在运行的代码写了日志,打开日志一看就知道要哪个进程不要哪个进程了!

    找到罪魁祸首是我应该停掉第一行的代码,然后直接

    kill -9 【pid】

    就可以了!这个pid在这里就是701

    再看3已经被空出来了,因为之前这个应该杀死的进程701在GPU3上面运行着!

  • 相关阅读:
    Tjoi 2017 异或和
    Noi 十连测 建造记者站
    Noi 十连测 基因改造计划
    Noi 十连测 人生的经验
    NOI 十连测 Round 5 T2 运河计划
    NOI 十连测 Round 5 T1
    【ZJOI2018】迷宫
    BZOJ 十连测 day5 T3
    BZOJ 十连测 可持久化字符串
    BZOJ 十连测 二进制的世界
  • 原文地址:https://www.cnblogs.com/liuxiangyan/p/14764509.html
Copyright © 2011-2022 走看看