Scrapy中用cookie模擬登錄新浪微博

最近想作一個微博的搜索頁文本分析的小項目，由於開放平臺裏這個api的限制略多，決定進入爬蟲坑本身動手．html 以前久聞Scrapy大名，嘗試了一下，抓取網頁甚是好用，避免了許多HTTP方面的繁瑣處理．不過仍是卡在了登錄這一步上．python 通常模擬登錄有兩種方式，一個是抓登錄時的包，而後模擬所需數據發送過去．因爲新浪常常改參數和加密方式，這個方法費時費力．另外一種就是直接發送cookie．ap

>>阅读原文<<