90分鐘的python爬蟲一課複習

學習內容: 完成爬取鬥圖啦表情包,涉及 1.爬蟲基礎知識 所用到的第三庫有requests,bs4(BeautifulSoup),os,threading 都是做爬蟲基本的第三方庫 爬蟲最主要由幾個模塊組成: 第一部分:請求數據 第二部分:獲取數據(獲取鏈接並進行解析) 第三部分:保存數據到本地 一般簡單的爬蟲就由這幾部分組成 更高級的爬蟲程序,則必須考慮網站的防守(反爬)措施,制定相應的進攻(反
相關文章
相關標籤/搜索