python--多線程編程 threading(一)

先假設一應用場景:html 爬蟲爬取淘寶店鋪的店鋪列表頁,獲取到全部的店鋪地址,根據每個店鋪地址,進去各店鋪獲取數據。python 該場景便很是適合使用多線程。由於爬取店鋪列表頁和爬取詳情頁,其實互不影響,只要處理好線程間通訊便可。多線程 上示意代碼:url #-*-coding:utf-8-*- import threading import time def get_detail_html(u
相關文章
相關標籤/搜索