python數據爬蟲——如何爬取二級頁面(三)

前面兩篇文章講了單頁面如何爬取,那麼我們來試試如何爬取二級頁面。 在爬取頁面的時候,需要有個良好的習慣,提前對爬取的頁面和爬取思路進行一個分析。 目的:爬取攜程無憂數據分析師的二級頁面,獲取每個崗位的要求。 頁面的構成:二級頁面是點擊一級頁面跳轉的。 解決思路: 1、在一級頁面中獲取二級頁面的鏈接 2、在二級二面中獲取想要的數據。 這裏我們會用到BeautifulSoup。 思路有了,那我們開始吧
相關文章
相關標籤/搜索