天貓商品爬蟲升級小記

天貓的數據很多人想爬，商品價格當然更多人想要了。所以天貓就做了很多防止採集的措施，這裏面主要有一個問題，部分商品屬性採用js腳本，從後臺地址加載，但是後臺地址不給你訪問。其實這就是淘寶的限制措施。 解決方法當然是有的，先是pc端，後來h5，在後來app,各種方法無所不用其極,任何困難都難不倒一個萬能的碼農,搞了幾天成功搞到app接口，到目前爲止爬蟲程序已經穩定運行了N個多月，單臺服務器日採集商品數

>>阅读原文<<