數據挖掘_並行併發介紹和同步異步介紹

  前面跟大家講的request s和spynner都是單進程(單線程)的順序抓取,而併發和並行執行的異步抓取會極大地提高抓取效率。   並行和併發 併發和並行使兩個相似的概念,併發是指在一個時間段內發生若干事件的情況,並行是指在同一時刻發生若干事件的情況。 我們可以以CPU的工作方式來說明這兩個概念   單核CPU下,多任務操作系統的各任務是以併發的方式運行的,因爲只有一個處理器,所以各任務會以
相關文章
相關標籤/搜索