scrapy 框架實踐爬蟲--思路篇

scrapy 框架實踐爬蟲–思路篇 1. 寫在最開始 最近接觸了一下 scrapy 框架 , 決定試用這個框架寫一個簡單的爬蟲。看標題就知道 , 這篇文章主要是瞭解 scrapy 框架並講解下爬蟲的大致思路 , 過程後續會再開博客進行講解。 在寫爬蟲之前 , 需要知道一下 , 這個爬蟲要做什麼事情。簡單來說就做了以下三件事: 1、爬取目標網頁 2、從網頁中提取所需數據 3、存放於本地數據庫中 2.

>>阅读原文<<