監控GPU使用情況；提升GPU利用率；Pytorch解決cuda out of memory

1、watch -n 0.1 nvidia-smi Pwr:Usage/Cap（48w/250w）表示顯卡功率；中間那一欄，表示顯存的已佔用/總共的大小；Perf表示性能狀態，從P0到P12，P0表示最大性能，P12表示狀態最小性能（未工作時爲P0）；FAN表示風扇轉速；persistence-M：持續模式的狀態，持續模式雖然耗能大，但是在新的GPU應用啓動時，花費的時間更少；Disp.A：dis

>>阅读原文<<