scrapy方法間的數據傳遞(多層傳遞)

有個爬蟲須要讀取數據庫的url進行循環爬取,同時還要把url做爲字段值來標記爬取到的數據歸屬於哪一個url,須要涉及到爬蟲方法間的數據傳遞,傳遞方法meta百度一下全都是,可是應用到個人需求的時候出現了不可描述的錯誤:css def start_requests(self): user_in_sql_list = [] # 這是列表是從數據庫讀取來的url列表 for res in
相關文章
相關標籤/搜索