Python使用Selenium模擬瀏覽器抓取淘寶商品美食信息

衆所周知,淘寶的網頁是非常複雜的,我們按照上面的模擬 Ajax 的請求去獲取 json 數據並且解析的方式已經不那麼好用了,於是我們要祭出我們的終極殺器—-Selenium ,這個庫可以調用瀏覽器驅動或者是 phantomjs 來模擬瀏覽器的請求,有了它我們就可以通過腳本去驅動瀏覽器,這樣哪些動態加載的數據就不用我們自己去獲取了,非常方便。 1.分析網頁確定思路 打開淘寶,輸入「美食」,回車 我們
相關文章
相關標籤/搜索