scrapy 爬取淘寶商品評論信息

爬蟲最後要達到的效果,是將某分類下,第一頁的所有商品的評論保存至mysql中。 具體會保存評論日期、評論id、評論內容、商品鏈接和商品id。 爬蟲部分代碼 # -*- coding: utf-8 -*- import scrapy import re import requests import math import json from scrapy.loader import ItemLoad
相關文章
相關標籤/搜索