Scrapy 數據保存在mysql數據庫

先在cmd裏登錄Mysql,並創建數據庫,創建對應items內容的字段表. 在項目settings文件中添加與數據庫連接相關的變量 在pipeline.py文件中創建一個MysqlDBPipeline類用於操作數據庫 在init裏面連接數據庫並獲取遊標,在process_item裏面操作數據庫插入數據,並提交. 在setting.py中把MysqlDBPipeline的類添加進去,開啓一下爬蟲.

>>阅读原文<<