1. 顯示當前GPU使用情況
Nvidia自帶了一個nvidia-smi的命令行工具，會顯示顯存使用情況：
$ nvidia-smi
輸出如下:
2. 周期性輸出GPU使用情況
但是有時我們希望不僅知道那一固定時刻的GPU使用情況，我們希望一直掌握其動向，此時我們就希望周期性地輸出，比如每 10s 就更新顯示。 這時候就需要用到 watch命令，來周期性地執行nvidia-smi命令了。
了解一下watch的功能：
作用：周期性執行某一命令，並將輸出顯示。
watch的基本用法是：
$ watch [options] command最常用的參數是 -n， 后面指定是每多少秒來執行一次命令。
監視顯存：我們設置為每 10s 顯示一次顯存的情況：
$ watch -n 10 nvidia-smi
我試驗的是:watch -n 1 nvidia-smi 也就是每一秒輸出一次，實時觀察
這樣，只要開着這個命令行窗口，就可以每1秒刷新一次，是不是很方便呢？
如果我們希望來周期性地執行其他命令行操作，那么就可以簡單地更換后面的nvidia-smi即可.
具體如下所示：重要的參數主要是溫度、內存使用、GPU占有率，具體如下紅框所示。
參考文獻：https://blog.csdn.net/yao_yao_2015/article/details/53404389