scrapy爬蟲-學習筆記之數據處理篇

1.items類的應用 在item類中定義數據字典 這和類主要用於處理數據的結構類型 2.在pipline(攔截item,並將item數據保存到數據庫中)中定義圖片下載並且在setting文件中修改配置 這個類主要用於針對獲取到數據的處理,例如寫入mysql,下載圖片地址等 3.連接mysql  下載mysqlclient
相關文章
相關標籤/搜索