簡單的Scrapy介紹

scrapy爬蟲有3個數據類型: Request類型:向網站提交請求的內容,表示一個HTTP請求,由DownLoader執行 Response類型:表示從網絡中爬取內容的封裝類 ,由DownLoader生成,由Spider處理 Item類型:spider產生的信息的封裝類,表示一個從HTML頁面中提取的信息內容,由Spider生成,由Item pipiline處理
相關文章
相關標籤/搜索