經常使用的linux系統監控命令

記錄一下本身經常使用的linux系統命令，方便之後查閱，發覺記憶愈來愈不行了

找到最耗CPU的java線程

ps命令

命令：ps -mp pid -o THREAD,tid,time   或者  ps -Lfp pid

結果展現：

 

這個命令的做用，主要是能夠獲取到對應一個進程下的線程的一些信息。 好比你想分析一下一個java進程的一些運行瓶頸點，能夠經過該命令找到全部當前Thread的佔用CPU的時間，也就是這裏的最後一列。

 

好比這裏找到了一個TID : 30834 ，所佔用的TIME時間最高。

經過 printf "%x\n" 30834 首先轉化成16進制， 繼續經過jstack命令dump出當前的jvm進程的堆棧信息。 經過Grep命令便可以查到對應16進制的線程id信息，很快就能夠找到對應最耗CPU的代碼快在哪。

簡單的解釋下，jstack下這一串線程信息內容： 

 

"DboServiceProcessor-4-thread-295" daemon prio=10 tid=0x00002aab047a9800 nid=0x7d9b waiting on condition [0x0000000046f66000]

nid : 對應的linux操做系統下的tid，就是前面轉化的16進制數字

tid: 這個應該是jvm的jmm內存規範中的惟一地址定位，若是你詳細分析jvm的一些內存數據時用得上，我本身還沒到那種程度，因此先放下

top命令

命令：top -Hp pid 

結果顯示：

 

和前面的效果一下，你能夠實時的跟蹤並獲取指定進程中最耗cpu的線程。 再用前面的方法提取到對應的線程堆棧信息。

 

判斷I/O瓶頸

mpstat命令

命令：mpstat -P ALL 1 1000

結果顯示：

 

注意一下這裏面的%iowait列，CPU等待I/O操做所花費的時間。這個值持續很高一般多是I/O瓶頸所致使的。

經過這個參數能夠比較直觀的看出當前的I/O操做是否存在瓶頸

 

iostat命令

命令: iostat -m -x 1 1000

 

一樣你能夠觀察對應的CPU中的%iowait數據，除此以外iostat還提供了一些更詳細的I/O狀態數據，好比比較重要的有： 

avgqu-sz :  The average queue length of the requests that were issued to the device. (磁盤隊列的請求長度，正常的話2,3比較好。能夠和cpu的load同樣的理解)

await : The average time (in milliseconds) for I/O requests issued to the device to be served. (表明一個I/O操做從wait到完成的總時間)

svctm和%util都是表明處理該I/O請求花費的時間和CPU的時間比例。 判斷是否瓶頸時，這兩個參數不是主要的

 

r/s w/s 和 rMB/s  wMB/s 都是表明當前系統處理的I/O的一些狀態，前者是咱們常說的tps，後者就是吞吐量。這也是評價一個系統的性能指標

 

pid命令

命令: pidstat -p pid -u -d -t -w -h 1 1000

 

結果顯示：

 

至關實用的一個命令，能夠基於當個進程分析對應的性能數據，包括CPU,I/O,IR , CS等，能夠方便開發者更加精細化的觀察系統的運行狀態。不過pidstat貌似是在2.6內核的一些較新的版本纔有，須要安裝sysstat包。

ubuntu下，能夠經過sudo apt-get install sysstat進行安裝。

sar命令

命令：sar -x pid 1 1000

 

sar也能夠指定對應的pid，關注固定的幾個參數，沒有pidstat那麼強大。 看不到對應的I/O, IR等信息。

sar的功能能夠覆蓋mpstat , iostat的相關功能。

dstat命令

命令：dstat -y --tcp 1 1000

 

經過dstat --tcp能夠比較方便的看到當前的tcp的各類狀態，不須要每次netstat -nat去看

 

其餘命令

netstat -natp  :  查看對應的網絡連接，關注下Recv-Q , Send-Q , State。

lsof -p pid :  查找對應pid的文件句柄

lsof -i : 80  : 查找對應端口被哪一個進程佔用

lsof  /tmp/1.txt ：查找對應文件被哪一個進程佔用

 

tcpdump / wireshark ：抓包分析工具

jstat / jmap / jstack / jps 等一系列的java監控命令

 

最後

  若是你想作一些性能調優的工做，必定要善於利用一些工具進行關注相應的狀態。經過linux命令你能夠比較方便的觀測到CPU , I/O , network等一些比較外圍的狀態， 不少時候就已經能夠解決大部分的問題。jvm內部的一些運行狀態監控，得須要藉助一些特有的工具進行細粒度的觀測。