Python抓取網頁動態數據——selenium webdriver的使用

文章目的 當咱們使用Python爬取網頁數據時，每每用的是urllib模塊，經過調用urllib模塊的urlopen(url)方法返回網頁對象，並使用read()方法得到url的html內容，而後使用BeautifulSoup抓取某個標籤內容，結合正則表達式過濾。可是，用urllib.urlopen(url).read()獲取的只是網頁的靜態html內容，不少動態數據（好比網站訪問人數、當前在線人

>>阅读原文<<