2020最新最全Python面試題整理（五）

1 描述一下scrapy框架的運行機制？ 從start_urls裏面獲取第一批url發送請求，請求由請求引擎給調度器入請求對列，獲取完畢後，調度器將請求對列交給下載器去獲取請求對應的響應資源，並將響應交給自己編寫的解析方法做提取處理，如果提取出需要的數據，則交給管道處理，如果提取出url，則繼續執行之前的步驟，直到多列裏沒有請求，程序結束。 2 寫爬蟲使用多進程好，還是用多線程好？ IO密集型代碼

>>阅读原文<<