當服務器被沒有經驗攻擊者或者自動攻擊程序入侵了的話,他們每每會消耗 100% 的資源。他們可能消耗 CPU 資源來進行數字貨幣的採礦或者發送垃圾郵件,也可能消耗帶寬來發動 DoS 攻擊。sql
所以出現問題的第一個表現就是服務器 「變慢了」。這可能表如今網站的頁面打開的很慢,或者電子郵件要花很長時間才能發送出去。express
那麼你應該查看那些東西呢?安全
檢查 1 - 當前都有誰在登陸?bash
你首先要查看當前都有誰登陸在服務器上。發現攻擊者登陸到服務器上進行操做並不複雜。服務器
其對應的命令是 w。運行 w 會輸出以下結果:網絡
- 08:32:55 up 98 days, 5:43, 2 users, load average: 0.05, 0.03, 0.00
- USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT
- root pts/0 113.174.161.1 08:26 0.00s 0.03s 0.02s ssh root@coopeaa12
- root pts/1 78.31.109.1 08:26 0.00s 0.01s 0.00s w
第一個 IP 是英國 IP,而第二個 IP 是越南 IP。這個不是個好兆頭。session
停下來作個深呼吸, 不要恐慌之下只是幹掉他們的 SSH 鏈接。除非你可以防止他們再次進入服務器,不然他們會很快進來並踢掉你,以防你再次回去。ssh
請參閱本文最後的「被入侵以後怎麼辦」這一章節來看找到了被入侵的證據後應該怎麼辦。curl
whois 命令能夠接一個 IP 地址而後告訴你該 IP 所註冊的組織的全部信息,固然就包括所在國家的信息。編輯器
檢查 2 - 誰曾經登陸過?
Linux 服務器會記錄下哪些用戶,從哪一個 IP,在何時登陸的以及登陸了多長時間這些信息。使用 last 命令能夠查看這些信息。
輸出相似這樣:
- root pts/1 78.31.109.1 Thu Nov 30 08:26 still logged in
- root pts/0 113.174.161.1 Thu Nov 30 08:26 still logged in
- root pts/1 78.31.109.1 Thu Nov 30 08:24 - 08:26 (00:01)
- root pts/0 113.174.161.1 Wed Nov 29 12:34 - 12:52 (00:18)
- root pts/0 14.176.196.1 Mon Nov 27 13:32 - 13:53 (00:21)
這裏能夠看到英國 IP 和越南 IP 交替出現,並且最上面兩個 IP 如今還處於登陸狀態。若是你看到任何未經受權的 IP,那麼請參閱最後章節。
登陸後的歷史記錄會記錄到二進制的 /var/log/wtmp 文件中(LCTT 譯註:這裏做者應該寫錯了,根據實際狀況修改),所以很容易被刪除。一般攻擊者會直接把這個文件刪掉,以掩蓋他們的攻擊行爲。 所以, 若你運行了 last 命令卻只看得見你的當前登陸,那麼這就是個不妙的信號。
若是沒有登陸歷史的話,請必定當心,繼續留意入侵的其餘線索。
檢查 3 - 回顧命令歷史
這個層次的攻擊者一般不會注意掩蓋命令的歷史記錄,所以運行 history 命令會顯示出他們曾經作過的全部事情。 必定留意有沒有用 wget 或 curl 命令來下載相似垃圾郵件機器人或者挖礦程序之類的很是規軟件。
命令歷史存儲在 ~/.bash_history 文件中,所以有些攻擊者會刪除該文件以掩蓋他們的所做所爲。跟登陸歷史同樣,若你運行 history 命令卻沒有輸出任何東西那就表示歷史文件被刪掉了。這也是個不妙的信號,你須要很當心地檢查一下服務器了。(LCTT 譯註,若是沒有命令歷史,也有多是你的配置錯誤。)
檢查 4 - 哪些進程在消耗 CPU?
你常遇到的這類攻擊者一般不怎麼會去掩蓋他們作的事情。他們會運行一些特別消耗 CPU 的進程。這就很容易發現這些進程了。只須要運行 top 而後看最前的那幾個進程就好了。
這也能顯示出那些未登陸進來的攻擊者。好比,可能有人在用未受保護的郵件腳原本發送垃圾郵件。
若是你最上面的進程對不瞭解,那麼你能夠 Google 一下進程名稱,或者經過 losf 和 strace 來看看它作的事情是什麼。
使用這些工具,第一步從 top 中拷貝出進程的 PID,而後運行:
- strace -p PID
這會顯示出該進程調用的全部系統調用。它產生的內容會不少,但這些信息能告訴你這個進程在作什麼。
- lsof -p PID
這個程序會列出該進程打開的文件。經過查看它訪問的文件能夠很好的理解它在作的事情。
檢查 5 - 檢查全部的系統進程
消耗 CPU 不嚴重的未受權進程可能不會在 top 中顯露出來,不過它依然能夠經過 ps 列出來。命令 ps auxf 就能顯示足夠清晰的信息了。
你須要檢查一下每一個不認識的進程。常常運行 ps (這是個好習慣)能幫助你發現奇怪的進程。
檢查 6 - 檢查進程的網絡使用狀況
iftop 的功能相似 top,它會排列顯示收發網絡數據的進程以及它們的源地址和目的地址。相似 DoS 攻擊或垃圾機器人這樣的進程很容易顯示在列表的最頂端。
檢查 7 - 哪些進程在監聽網絡鏈接?
一般攻擊者會安裝一個後門程序專門監聽網絡端口接受指令。該進程等待期間是不會消耗 CPU 和帶寬的,所以也就不容易經過 top 之類的命令發現。
lsof 和 netstat 命令都會列出全部的聯網進程。我一般會讓它們帶上下面這些參數:
- lsof -i
- netstat -plunt
你須要留意那些處於 LISTEN 和 ESTABLISHED 狀態的進程,這些進程要麼正在等待鏈接(LISTEN),要麼已經鏈接(ESTABLISHED)。若是遇到不認識的進程,使用 strace 和 lsof 來看看它們在作什麼東西。
被入侵以後該怎麼辦呢?
首先,沒關係張,尤爲當攻擊者正處於登陸狀態時更不能緊張。你須要在攻擊者警覺到你已經發現他以前奪回機器的控制權。若是他發現你已經發覺到他了,那麼他可能會鎖死你不讓你登錄服務器,而後開始毀屍滅跡。
若是你技術不太好那麼就直接關機吧。你能夠在服務器上運行 shutdown -h now 或者 systemctl poweroff 這兩條命令之一。也能夠登陸主機提供商的控制面板中關閉服務器。關機後,你就能夠開始配置防火牆或者諮詢一下供應商的意見。
若是你對本身很有自信,而你的主機提供商也有提供上游防火牆,那麼你只須要以此建立並啓用下面兩條規則就好了:
- 只容許從你的 IP 地址登陸 SSH。
- 封禁除此以外的任何東西,不只僅是 SSH,還包括任何端口上的任何協議。
這樣會當即關閉攻擊者的 SSH 會話,而只留下你能夠訪問服務器。
若是你沒法訪問上游防火牆,那麼你就須要在服務器自己建立並啓用這些防火牆策略,而後在防火牆規則起效後使用 kill 命令關閉攻擊者的 SSH 會話。(LCTT 譯註:本地防火牆規則 有可能不會阻止已經創建的 SSH 會話,因此保險起見,你須要手工殺死該會話。)
最後還有一種方法,若是支持的話,就是經過諸如串行控制檯之類的帶外鏈接登陸服務器,而後經過 systemctl stop network.service 中止網絡功能。這會關閉全部服務器上的網絡鏈接,這樣你就能夠慢慢的配置那些防火牆規則了。
重奪服務器的控制權後,也不要覺得就萬事大吉了。
不要試着修復這臺服務器,而後接着用。你永遠不知道攻擊者作過什麼,所以你也永遠沒法保證這臺服務器仍是安全的。
用戶登陸相關日誌文件:
utmp、wtmp、btmp文件
Linux用戶登陸信息放在三個文件中:
1 /var/run/utmp:記錄當前正在登陸系統的用戶信息,默認由who和w記錄當前登陸用戶的信息,uptime記錄系統啓動時間;
2 /var/log/wtmp:記錄當前正在登陸和歷史登陸系統的用戶信息,默認由last命令查看;
3 /var/log/btmp:記錄失敗的登陸嘗試信息,默認由lastb命令查看。
這三個文件都是二進制數據文件,而且三個文件結構徹底相同,是由/usr/include/bits/utmp.h文件定義了這三個文件的結構體。
默認狀況下文件的日誌信息會經過logrotate日誌管理工具按期清理。logrotate的配置文件是/etc/logrotate.conf,此處是logrotate的缺省設置,一般不須要對它進行修改。日誌文件的輪循壓縮等設置存放在獨立的配置文件中,它(們)放在/etc/logrotate.d/目錄下,它會覆蓋缺省設置。
若是不想記錄相關信息,則能夠直接將相關文件刪除便可。若是系統不存在該文件,則須要在此路徑touch一個文件就能夠繼續記錄相關信息了。
此外:
若是想禁用who命令,則只須要將utmp的可讀權限去掉就行,這樣非root用戶就不能用此命令了;若是是btmp文件,手工建立的話注意權限必須爲600,不然不能正確寫入信息。
相關命令:
lastlog、last、lastb、ac、who、w、users、utmpdump。
其中last、lastb、who、utmpdump能夠經過指定參數而查看三個中的任意一個文件。
2.1 lastlog:
列出全部用戶最近登陸的信息,或者指定用戶的最近登陸信息。lastlog引用的是/var/log/lastlog文件中的信息,包括login-name、port、last login time
lzx-clone1:/var/log # lastlog Username Port Latest root pts/1 Wed Oct 19 14:37:46 +0800 2016 bin **Never logged in** daemon **Never logged in** gdm **Never logged in** admin **Never logged in** lzx pts/3 Wed Oct 19 15:15:24 +0800 2016
2.2 last
列出當前和曾經登入系統的用戶信息,它默認讀取的是/var/log/wtmp文件的信息。輸出的內容包括:用戶名、終端位置、登陸源信息、開始時間、結束時間、持續時間。注意最後一行輸出的是wtmp文件起始記錄的時間。固然也能夠經過last -f參數指定讀取文件,能夠是/var/log/btmp、/var/run/utmp
[root@CLMUGR-APP-D-01 log]# last root pts/0 10.200.108.92 Tue Oct 18 15:04 still logged in root pts/1 10.200.108.92 Wed Oct 12 17:02 still logged in root pts/0 10.200.108.92 Wed Oct 12 09:20 - 16:58 (07:38) root pts/0 10.200.108.92 Sat Oct 8 10:40 - 14:45 (04:05) root pts/0 10.200.108.92 Wed Aug 31 10:52 - 08:44 (21:52) root pts/0 10.200.108.92 Fri Jul 8 13:08 - 09:41 (25+20:32) reboot system boot 2.6.32-431.el6.x Tue Jan 13 19:40 - 19:44 (00:04) wtmp begins Tue Jan 13 19:40:22 2015
2.3 lastb
列出失敗嘗試的登陸信息,和last命令功能徹底相同,只不過它默認讀取的是/var/log/btmp文件的信息。固然也能夠經過last -f參數指定讀取文件,能夠是/var/log/btmp、/var/run/utmp
[root@CLMUGR-APP-D-01 log]# lastb root ssh:notty 10.200.108.92 Wed Oct 19 17:11 - 17:11 (00:00) root ssh:notty 10.200.108.92 Wed Oct 19 17:11 - 17:11 (00:00) root ssh:notty 10.200.108.92 Wed Oct 19 17:10 - 17:10 (00:00) root ssh:notty 10.200.108.92 Wed Oct 19 17:10 - 17:10 (00:00) btmp begins Wed Oct 19 17:10:12 2016
lzx-clone1:/var/log # lastb -F -f /var/log/wtmp root pts/0 10.200.108.92 Tue Mar 8 11:04:36 2016 - Tue Mar 8 11:04:36 2016 (00:00) wtmp begins Tue Mar 8 11:04:36 2016
2.4 ac
輸出全部用戶總的鏈接時間,默認單位是小時。因爲ac是基於wtmp統計的,因此修改或者刪除wtmp文件都會使ac的結果受影響。(Suse默認沒有該命令)
[root@cloudexpress ~]# ac
total 7404.62
2.5 who
查看當前登入系統的用戶信息。其中who -m等效於who am i。
語法who [OPTION]... [ FILE | ARG1 ARG2 ]。
who命令強大的一點是,它既能夠讀取utmp文件也能夠讀取wtmp文件,默認沒有指定FILE參數時,who查詢的是utmp的內容。固然能夠指定FILE參數,好比who -aH /var/log/wtmp,則此時查看的是wtmp文件。
查看當前運行級別
[root@CLMUGR-APP-D-01 log]# who -rH
名稱 線路 時間 空閒 進程號 備註
運行級別 5 2016-07-08 13:01
查看登陸用戶和用戶數≈users
lzx-clone1:/var/run # who -q
root root root root
# users=4
2.6 w
查看當前登入系統的用戶信息及用戶當前的進程(而who命令只能看用戶不能看進程)。該命令能查看的信息包括字系統當前時間,系統運行時間,登錄系統用戶總數及系統一、五、10分鐘內的平均負載信息。後面的信息是用戶,終端,登陸源,login time,idle time,JCPU,PCPU,當前執行的進程等。
w的信息來自兩個文件:用戶登陸信息來自/var/run/utmp,進程信息來自/proc/.
lzx-clone1:/var/log # w 15:26:40 up 12 days, 56 min, 4 users, load average: 0.14, 0.16, 0.20 USER TTY LOGIN@ IDLE JCPU PCPU WHAT root :0 10Oct16 ?xdm? 43:33 0.69s /usr/bin/gnome-session root pts/0 Wed14 40.00s 0.19s 0.00s w root pts/1 Wed14 23:01m 0.06s 0.06s -bash root pts/2 10Oct16 9days 0.01s 0.01s /bin/bash -l
2.7 users
顯示當前正在登入統的用戶名。語法是users [OPTION]... [FILE]。若是未指定FILE參數則默認讀取的是/var/run/utmp,固然也能夠指定通用相關文件/var/log/wtmp,此時輸出的就不是當前用戶了。
[root@CLMUGR-APP-D-01 log]# users
root root
2.8 utmpdump
utmpdump用於轉儲二進制日誌文件到文本格式的文件以便查看,同時也能夠修改二進制文件!!包括/var/run/utmp、/var/log/wtmp、/var/log/btmp。語法爲:utmpdump [options] [filename]。修改文件實際就能夠抹除系統記錄,因此必定要設置好權限,防止非法入侵。
例子:修改utmp或wtmp。因爲這些都是二進制日誌文件,你不能像編輯文件同樣來編輯它們。取而代之是,你能夠將其內容輸出成爲文本格式,並修改文本輸出內容,而後將修改後的內容導入回二進制日誌中。以下:
utmpdump /var/log/utmp > tmp_output.txt #導出文件信息 #<使用文本編輯器修改 tmp_output.txt> utmpdump -r tmp_output.txt > /var/log/utmp #導入到源文件中