【爬蟲】抓取京東商品列表具體商品的各類評論數量-2019年6月可用

原本只是想簡單地抓個好評數，在一開始的搜索結果頁面上php 而後發現抓不到，用lxml裏面etree解析的是空的html 問題就變煩了，問了一下前同事，告訴我說是異步渲染的python 在這裏找到了全部有關評論的請求：json 請求獲得的是json格式數據：數組 url明顯是商品id拼起來的，因此就要先獲取整個頁面上全部的商品idapp pids = html1.xpath('//li[cont

>>阅读原文<<