ajax異步加載網頁爬蟲

通常的網頁,使用httpclient就能作到,但httpclient的設計初衷是一個基於http協議的客戶端,它並非一個瀏覽器,也不具有瀏覽器的功能,因此針對ajax異步加載的網頁,就無能爲力了. 我本想也用java來作ajax異步加載網頁的爬蟲,只惋惜使用selenium的jar包時,出了不少問題,我沒能解決.最後仍是選擇用了Python來寫.html 搭建環境 1.下載selenium,sel

>>阅读原文<<