【Scrapy】全棧爬取筆趣閣小說

前兩天介紹完了scrapy基礎操作之後，今天我們來實踐操一下 全棧爬取筆趣閣小說，我們要先分析其主要URL地址，可分爲以下三大類： 所有小說url地址總表 小說章節總表 小說章節內 根據分析,就需要寫三個函數來對頁面內容進行提取和處理 spider代碼 # -*- coding: utf-8 -*- import scrapy from biquge.items import BiqugeItem

>>阅读原文<<