Resource exhausted: OOM when allocating tensor with shape[3,3,384,384] and type float on /job:localhost/replica:0/task:0/device:GPU:0 by allocator GPU_0。。。。。

報錯信息：

 OP_REQUIRES failed at assign_op.h:111 : Resource exhausted: OOM when allocating tensor with shape[3,3,384,384] and type float on /job:localhost/replica:0/task:0/device:GPU:0 by allocator GPU_0_bfc

大概意思是資源耗盡，無法在分配tensor了。

因為我之前有跑其他程序，然后使用ctrl+z中斷的，估計進程沒有直接殺死，還在后台運行。

使用$ nvidia-smi查看內存使用情況，果然快滿了。