應該知道的Linux技巧

這篇文章來源於Quroa的一個問答《What are some time-saving tips that every Linux user should know?》—— Linux用戶有哪些應該知道的提升效率的技巧。我以爲挺好的，總結得比較好，把其轉過來，並加了一些本身的理解。 首先，我想告訴你們，在Unix/Linux下，最有效率技巧的不是操做圖形界面，而是命令行操做，由於命令行意味着自動化。若是你看過《你可能不知道的Shell》以及《28個Unix/Linux的命令行神器》你就會知道Linux有多強大，這個強大徹底來自於命令行，因而，就算你不知道怎麼去作一個環保主義的程序員，至少他們可讓你少熬點夜，從而有利於你的身體健康和性生活。下面是一個有點長的列表，正如做者所說，你並不須要知道全部的這些東西，可是若是你還在很沉重地在使用Linux的話，這些東西都值得你看一看。 （注：若是你想知道下面涉及到的命令的更多的用法，你必定要man一點。對於一些命令，你能夠須要先yum或apt-get來安裝一下，若是有什麼問題，別忘了Google。若是你要Baidu的話，我僅表明這個地球上全部的生物包括微生物甚至細菌病毒和小強BS你到宇宙毀滅）

基礎

• 學習 Bash 。你能夠man bash來看看bash的東西，並不複雜也並不長。你用別的shell也行，可是bash是很強大的而且也是系統默認的。（學習zsh或tsch只會讓你在不少狀況下受到限制）

• 學習 vim 。在Linux下，基本沒有什麼可與之競爭的編譯輯器（就算你是一個Emacs或Eclipse的重度用戶）。你能夠看看《簡明vim攻略》和 《Vim的冒險遊戲》以及《給程序員的Vim速查卡》還有《把Vim變成一個編程的IDE》等等。

• 瞭解 ssh。明白不須要口令的用戶認證（經過ssh-agent, ssh-add），學會用sshFQ，用scp而不是ftp傳文件，等等。你知道嗎？scp 遠端的時候，你能夠按tab鍵來查看遠端的目錄和文件（固然，須要無口令的用戶認證），這都是bash的功勞。

• 熟悉bash的做業管理，如： &, Ctrl-Z, Ctrl-C, jobs, fg, bg, kill, 等等。固然，你也要知道Ctrl+\（SIGQUIT）和Ctrl+C （SIGINT）的區別。

• 簡單的文件管理 ： ls 和 ls -l (你最好知道 「ls -l」 的每一列的意思), less, head, tail 和 tail -f, ln 和 ln -s (你知道明白hard link和soft link的不一樣和優缺點), chown, chmod, du (若是你想看看磁盤的大小 du -sk *), df, mount。固然，原做者忘了find命令。

• 基礎的網絡管理： ip 或 ifconfig, dig。固然，原做者還忘了如netstat, ping, traceroute, 等

• 理解正則表達式，還有grep/egrep的各類選項。好比： -o, -A, 和 -B 這些選項是很值得了解的。

• 學習使用 apt-get 和 yum 來查找和安裝軟件（前者的經典分發包是Ubuntu，後者的經典分發包是Redhat），我還建議你試着從源碼編譯安裝軟件。

平常

• 在 bash 裏，使用 Ctrl-R 而不是上下光標鍵來查找歷史命令。

• 在 bash裏，使用 Ctrl-W 來刪除最後一個單詞，使用 Ctrl-U 來刪除一行。請man bash後查找Readline Key Bindings一節來看看bash的默認熱鍵，好比：Alt-. 把上一次命令的最後一個參數打出來，而Alt-* 則列出你能夠輸入的命令。

• 回到上一次的工做目錄： cd –  （回到home是 cd ~）

• 使用 xargs。這是一個很強大的命令。你可使用-L來限定有多少個命令，也能夠用-P來指定並行的進程數。若是你不知道你的命令會變成什麼樣，你可使用xargs echo來看看會是什麼樣。固然， -I{} 也很好用。示例：

1 2 3

find . -name \*.py | xargs grep some_function   cat hosts | xargs -I{} ssh root@{} hostname

• pstree -p 能夠幫你顯示進程樹。（讀過個人那篇《一個fork的面試題》的人應該都不陌生）

• 使用 pgrep 和 pkill 來找到或是kill 某個名字的進程。 (-f 選項頗有用).

• 瞭解能夠發給進程的信號。例如：要掛起一個進程，使用 kill -STOP [pid]. 使用 man 7 signal 來查看各類信號，使用kill -l 來查看數字和信號的對應表

• 使用 nohup 或  disown 若是你要讓某個進程運行在後臺。

• 使用netstat -lntp來看看有偵聽在網絡某端口的進程。固然，也可使用 lsof。

• 在bash的腳本中，你可使用 set -x 來debug輸出。使用 set -e 來當有錯誤發生的時候abort執行。考慮使用 set -o pipefail 來限制錯誤。還可使用trap來截獲信號（如截獲ctrl+c）。

• 在bash 腳本中，subshells (寫在圓括號裏的) 是一個很方便的方式來組合一些命令。一個經常使用的例子是臨時地到另外一個目錄中，例如：

1 2 3

# do something in current dir ( cd /some/other/dir ; other- command ) # continue in original dir

• 在 bash 中，注意那裏有不少的變量展開。如：檢查一個變量是否存在: ${name:?error message}。若是一個bash的腳本須要一個參數，也許就是這樣一個表達式 input_file=${1:?usage: $0 input_file}。一個計算表達式： i=$(( (i + 1) % 5 ))。一個序列： {1..10}。 截斷一個字符串： ${var%suffix} 和 ${var#prefix}。 示例： if var=foo.pdf, then echo ${var%.pdf}.txt prints 「foo.txt」.

• 經過 <(some command) 能夠把某命令當成一個文件。示例：比較一個本地文件和遠程文件 /etc/hosts： diff /etc/hosts <(ssh somehost cat /etc/hosts)

• 瞭解什麼叫 「here documents」 ，就是諸如 cat <<EOF 這樣的東西。

• 在 bash中，使用重定向到標準輸出和標準錯誤。如： some-command >logfile 2>&1。另外，要確認某命令沒有把某個打開了的文件句柄重定向給標準輸入，最佳實踐是加上 「</dev/null」，把/dev/null重定向到標準輸入。

• 使用 man ascii 來查看 ASCII 表。

• 在遠端的 ssh 會話裏，使用 screen 或 dtach 來保存你的會話。（參看《28個Unix/Linux的命令行神器》）

• 要來debug Web，試試curl 和 curl -I 或是 wget 。我以爲debug Web的利器是firebug，curl和wget是用來抓網頁的，呵呵。

• 把 HTML 轉成文本： lynx -dump -stdin

• 若是你要處理XML，使用 xmlstarlet

• 對於 Amazon S3， s3cmd 是一個很方便的命令（還有點不成熟）

• 在 ssh中，知道怎麼來使用ssh隧道。經過 -L or -D (還有-R) ，FQ神器。

• 你還能夠對你的ssh 作點優化。好比，.ssh/config 包含着一些配置：避免連接被丟棄，連接新的host時不須要確認，轉發認證，之前使用壓縮（若是你要使用scp傳文件）：

1 2 3 4 5 6

TCPKeepAlive= yes ServerAliveInterval=15 ServerAliveCountMax=6 StrictHostKeyChecking=no Compression= yes ForwardAgent= yes

• 若是你有輸了個命令行，可是你改變注意了，但你又不想刪除它，由於你要在歷史命令中找到它，但你也不想執行它。那麼，你能夠按下 Alt-# ，因而這個命令關就被加了一個#字符，因而就被註釋掉了。

數據處理 

• 瞭解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 選項).

• 瞭解用 cut, paste, 和 join 命令來操做文本文件。不少人忘了在cut前使用join。

• 若是你知道怎麼用sort/uniq來作集合交集、並集、差集能很大地促進你的工做效率。假設有兩個文本文件a和b已解被 uniq了，那麼，用sort/uniq會是最快的方式，不管這兩個文件有多大（sort不會被內存所限，你甚至可使用-T選項，若是你的/tmp目錄很小）

1 2 3 4 5

cat a b | sort | uniq > c   # c is a union b 並集   cat a b | sort | uniq -d > c   # c is a intersect b 交集   cat a b b | sort | uniq -u > c   # c is set difference a - b 差集

• 瞭解和字符集相關的命令行工具，包括排序和性能。不少的Linux安裝程序都會設置LANG 或是其它和字符集相關的環境變量。這些東西可能會讓一些命令（如：sort）的執行性能慢N多倍（注：就算是你用UTF-8編碼文本文件，你也能夠很安全地使用ASCII來對其排序）。若是你想Disable那個i18n 並使用傳統的基於byte的排序方法，那就設置export LC_ALL=C （實際上，你能夠把其放在 .bashrc）。若是這設置這個變量，你的sort命令頗有可能會是錯的。

• 瞭解 awk 和 sed，並用他們來作一些簡單的數據修改操做。例如：求第三列的數字之和： awk ‘{ x += $3 } END { print x }’。這可能會比Python快3倍，並比Python的代碼少三倍。

• 使用 shuf 來打亂一個文件中的行或是選擇文件中一個隨機的行。

• 瞭解sort命令的選項。瞭解key是什麼（-t和-k）。具體說來，你可使用-k1,1來對第一列排序，-k1來對全行排序。

• Stable sort (sort -s) 會頗有用。例如：若是你要想對兩例排序，先是以第二列，而後再以第一列，那麼你能夠這樣： sort -k1,1 | sort -s -k2,2

• 咱們知道，在bash命令行下，Tab鍵是用來作目錄文件自動完成的事的。可是若是你想輸入一個Tab字符（好比：你想在sort -t選項後輸入<tab>字符），你能夠先按Ctrl-V，而後再按Tab鍵，就能夠輸入<tab>字符了。固然，你也可使用$’\t’。

• 若是你想查看二進制文件，你可使用hd命令（在CentOS下是hexdump命令），若是你想編譯二進制文件，你可使用bvi命令（http://bvi.sourceforge.net/ 牆）

• 另外，對於二進制文件，你可使用strings（配合grep等）來查看二進制中的文本。

• 對於文本文件轉碼，你能夠試一下 iconv。或是試試更強的 uconv 命令（這個命令支持更高級的Unicode編碼）

• 若是你要分隔一個大文件，你可使用split命令（split by size）和csplit命令（split by a pattern）。

系統調試

• 若是你想知道磁盤、CPU、或網絡狀態，你可使用 iostat, netstat, top (或更好的 htop), 還有 dstat 命令。你能夠很快地知道你的系統發生了什麼事。關於這方面的命令，還有iftop, iotop等（參看《28個Unix/Linux的命令行神器》）

• 要了解內存的狀態，你可使用free和vmstat命令。具體來講，你須要注意 「cached」 的值，這個值是Linux內核佔用的內存。還有free的值。

• Java 系統監控有一個小的技巧是，你可使用kill -3 <pid> 發一個SIGQUIT的信號給JVM，能夠把堆棧信息（包括垃圾回收的信息）dump到stderr/logs。

• 使用 mtr 會比使用 traceroute 要更容易定位一個網絡問題。

• 若是你要找到哪一個socket或進程在使用網絡帶寬，你可使用 iftop 或 nethogs。

• Apache的一個叫 ab 的工具是一個頗有用的，用quick-and-dirty的方式來測試網站服務器的性能負載的工做。若是你須要更爲複雜的測試，你能夠試試 siege。

• 若是你要抓網絡包的話，試試 wireshark 或 tshark。

• 瞭解 strace 和 ltrace。這兩個命令可讓你查看進程的系統調用，這有助於你分析進程的hang在哪了，怎麼crash和failed的。你還能夠用其來作性能profile，使用 -c 選項，你可使用-p選項來attach上任意一個進程。

• 瞭解用ldd命令來檢查相關的動態連接庫。注意：ldd的安全問題

• 使用gdb來調試一個正在運行的進程或分析core dump文件。參看我寫的《GDB中應該知道的幾個調試方法》

• 學會到 /proc 目錄中查看信息。這是一個Linux內核運行時記錄的整個操做系統的運行統計和信息，好比： /proc/cpuinfo, /proc/xxx/cwd, /proc/xxx/exe, /proc/xxx/fd/, /proc/xxx/smaps.

• 若是你調試某個東西爲何出錯時，sar命令會有用。它可讓你看看 CPU, 內存, 網絡, 等的統計信息。

• 使用 dmesg 來查看一些硬件或驅動程序的信息或問題。

做者最後加了一個免責聲明：Disclaimer: Just because you can do something in bash, doesn’t necessarily mean you should. ;) （全文完）