scrapy爬蟲(三)item及pipline

在item中定義需要存儲的字段,然後導入到爬蟲文件中,將相應字段數據添加到item中,直接yield出去就能傳遞給pipline 如果要讓pipline能接收到需要在settings中開啓ITEM_PIPELINES 這裏以默認的pipline爲例(可以自定義pipline,定義好後按上圖的方式添加,用不上的要註釋掉,後面的數字表示優先級,越小越先執行),可以看到piplines文件中的Lagou
相關文章
相關標籤/搜索