手把手教你實現window圖片爬蟲(二)

第二篇:技術要點    1.網頁抓取工具     在開發過程中用了好幾個版本,經過不斷調試,最終爲了網頁解析更準確,選擇了phantomjs。       初級版:httpclient,優點速度快,缺點無法解析動態頁面。       中級版: WebDriver  可以解析動態網頁,可以使用IE內核,當然還有FirefoxDriver, ChromeDriver,HtmlUnitDriver,這些
相關文章
相關標籤/搜索