输入nvidia-smi查看GPU利用率发现，整体GPU占用了9000M/10000M，但下面运行的进程却不到2000M。事情是这样的，明明模型就不大，但是一直报错cuda out of memory.把所有占用GPU的进程都清理掉就行了。