Python學習之多進程併發爬蟲

之前作過Python的爬蟲,不過那隻爬取貼吧內容,比較簡單,只是用來剛開始練練手的。這段時間又從新看Python,看到了正則表達式,因而想對爬蟲再深刻的瞭解下,主要是對爬蟲的線程以及進程學習。html 爬蟲是io密集型,因此使用多線程會提升效率,可是懂點Python的人都知道,gil的存在致使Python的多線程有點坑,這裏簡單的介紹下gil。 Gil 是全局解釋器鎖,爲了數據的安全。而在Pyth
相關文章
相關標籤/搜索