1.對頁面的解析能力關於這一條，基本上就是靠特定語言的第三方包來完成 網頁的解析。若是要從零開始本身實現一個HTML解析器，難度和時間上的阻礙都是很大的。而對於複雜的基於大量Javascript運算生成的網頁或者請 求，則能夠經過調度瀏覽器環境來完成。這一條上，Python是絕對勝任的。
2.對數據庫的操做能力（mysql）對數據庫的操做能力上，Python有官方及第三方的鏈接庫。另外，對於爬蟲抓取的數據，存儲在NoSQL型數據庫我的認爲更加合適。
3.爬取效率確實腳本語言的運算速度不高，可是相對於特定網站反爬蟲機制強度以及網絡IO的速度，這幾門語言的速度詫異均可以忽略不計，而在於開發者的水平。若是利用好發送網絡請求的等待時間處理另外的事情（多線程、多進程或者協程），那麼各語言效率上是不成問題的。
4.代碼量這一點上Python是佔有優點的，衆所周知Python代碼簡潔著稱，只要開發者水平到位，Python代碼能夠像僞代碼同樣簡潔易懂，且代碼量較低。
推薦語言時說明所需類庫或者框架，謝謝。Python: requests + MongoDB + BeautifulSoup
好比：python+MySQLdb+urllib2+re
ps:其實我不太喜歡用python(多是在windows平臺的緣由，須要各類轉字符編碼，並且多線程貌似很雞肋。)因爲GIL的存在，Python的多線程確實沒有利用到多核的優點，對此你可使用多進程解決。可是對於爬蟲，更多的時間在於網絡IO的等待上，因此直接使用協程便可很好地提高抓取速度。
PHP寫爬蟲還好，我寫過一個，用PHP Command Line下運行。用Curl_multi 50線程併發，一天能抓大概60萬頁，依網速而定，我是用的校園網因此比較快，數據是用正則提取出來的。
Curl是比較成熟的一個lib，異常處理、http header、POST之類都作得很好，重要的是PHP下操做MySQL進行入庫操做比較省心。
不過在多線程Curl（Curl_multi）方面，對於初學者會比較麻煩，特別是PHP官方文檔在Curl_multi這方面的介紹也極爲模糊。
Python寫爬蟲一個最大的好處是比較傻瓜，Requests之類的lib功能上和Curl至關，可是若是隻是作簡單的爬蟲，易用性比較好，並且有 Beautiful Soup這樣的傻瓜lib，確實是很是適合用來作爬蟲。
不過編碼可能的確是個令初學者頭疼的問題，我以爲PHP可能還更好一點，事實上若是不是團隊要求，我本身作着玩的爬蟲，我都是用PHP寫的。
JavaScript我以爲像一個在虛擬機裏的虛擬機，拋開 性能不談。
我是沒見過有人拿這個寫爬蟲的。
- 它首先是在一個沙箱裏跑的，對於操做數據庫或者本地文件，會比較麻煩，沒有原生接口，我由於沒用過這個作爬蟲，也沒去研究過有什麼其餘方案。
- 對於DOM樹的解析，除了效率比較低下，內存佔用也比較大。
- 跨域的話，雖然在Chrome下能夠經過 --disable-web-security來禁用，不過也是一件麻煩事。
- 總之JS要寫爬蟲，麻煩事是一大堆。
Node.js 我是真的沒有用過。
說到性能的話，爬蟲和性能基本不搭邊，是不用考慮的事情。 在我開爬蟲的時候，將近30Mbps的爬取效率下，用PHP Command Line作的爬蟲，CPU佔用也不過3-5%，內存消耗大概15-20MiB（Core 2 Duo P8700——有些歷史的老U了，爬蟲是50線程，每一個線程含10個正則提取、1個JSON解析、2個數據庫Insert操做 (百萬級別數據的IF NOT EXIST )、40個左右的各類異常判斷）——
瓶頸應該只有網絡。
我開爬蟲那幾天，大概爬了270GiB左右的數據。
知乎用戶，高等弱智 http://ylsc633.com
知乎用戶
寫回答…