python多進程multiprocessing模塊中Queue的妙用

　　最近的部門RPA項目中，小爬爲了提升爬蟲性能，使用了Python中的多進程（multiprocessing）技術，裏面需要用到進程鎖Lock，用到進程池Pool，同時利用map方法一次構造多個process。Multiprocessing的使用確實能顯著提升爬蟲速度，不過程序交由用戶使用時，缺乏一個好的GUI窗口來顯示爬蟲進度。之前的文章中使用了Chrome瀏覽器來渲染js腳本生成了進度條。但

>>阅读原文<<