如何自己封裝一個爬蟲框架

自己封裝一個爬蟲框架 1. 簡介 2. 使用 3. 不足 4. 總結 1.簡介 先看一下項目整體的目錄結構： 1.1 run.py: 啓動文件，文件的具體參數請仔細看註釋內容 1.2 spider.py：具體的爬蟲文件，裏面主要有三個方法 List item 1） save_data(data, mode=‘db’)：保存目標數據，data是2）中返回的data, mode=’db’ 是保存的模式

>>阅读原文<<