一套完整的scrapy爬取微博的新手教材

大家好，我是隔壁小王，上次給大家講了簡單易懂的selenium，完全模擬人的行爲來爬取網站的方法，但是巨慢，那這次就說一下爬蟲必學的經典：scrapy。 可能你會問，爲什麼scrapy資料這麼多，這麼成熟，還要費事去說一下呢？我希望我的帖子是通過一個完整的項目可以讓一個新手快速瞭解掌握這個框架，唯一的要求，就是你會python的基本語法。 ok，廢話不多說。所謂代碼未動，需求先行：爬取某個微博用戶

>>阅读原文<<