python scrapy 爬取steam遊戲

目標網頁： 遊戲列表頁 遊戲詳情頁 遊戲評論 目標數據： 列表頁：遊戲標題，遊戲價格，折扣，評論總數，好評比例，遊戲發佈時間 詳情頁：遊戲圖片，遊戲簡介，遊戲評論 首先創建一個scrapy項目 根據規律構造列表頁的請求地址 分析標籤，抓取數據 標題↑，價格↓ 列表頁解析函數 測試打印第一條數據 然後開始構建詳情頁請求（這裏一定要加accept-language這個請求頭，不然會返回英文頁面） 詳情

>>阅读原文<<