scrapy 框架實踐爬蟲--思路篇

scrapy 框架實踐爬蟲–思路篇 1. 寫在最開始 最近接觸了一下 scrapy 框架 , 決定試用這個框架寫一個簡單的爬蟲。看標題就知道 , 這篇文章主要是瞭解 scrapy 框架並講解下爬蟲的大體思路 , 過程後續會再開博客進行講解。python 在寫爬蟲以前 , 須要知道一下 , 這個爬蟲要作什麼事情。簡單來講就作了如下三件事:web 一、爬取目標網頁 二、從網頁中提取所需數據 三、存放於

>>阅读原文<<