【python小隨筆】進程池 multiprocessing.Pool的簡單實現與踩過的坑

#導入進程模塊
import multiprocessing

#建立進程池             坑：必定要在循環外面建立進程池，否則會一直建立
pool = multiprocessing.Pool(30)
for Size in Size_list:
   
    index,Size_Asin = Size.xpath('./@value')[0].split(",")              
    Size_Asin_url = "https://www.amazon.cn/dp/%sth=1&psc=1" % Size_Asin  # 拼接每一個Size_Asin網頁URL
                

    #任務進程池執行     坑：這一步要在循環裏面執行
     pool.apply_async(self.Size_Asin_Get,args=(Size_Asin_url,parentAsin,))


pool.close()         #坑： 要在循環外面關閉
pool.join()

 少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁少於150字的隨筆不容許發佈到網站首頁