scrapy設置headers，cookies

scrapy中有三種方式設置headers，cookies setting中設置cookie middlewares中設置cookie sipder文件中重寫start_requests方法 這裏記錄第三種，重寫start_requests方法，這裏以豆瓣網爲例 一、設置請求頭headers 在start_request中新增 headers = { 'User-Agent':'Mozil

>>阅读原文<<