(一)selenium分析爬取豆瓣電影短評並存儲到mongodb中

分析並寫下爬取過程 1.打開豆瓣影評url=https://movie.douban.com/review/best/ 分析頁面發現一頁有十部電影，循環獲取這十部電影的url 2.打開其中一部電影url發現其全部短評皆在此頁面的一個子url中，獲取此url 3.進入短評頁面獲取數據，並存儲html 代碼步驟實現 我這裏用的是定義一個類來實現首先聲明__init__python class DouB

>>阅读原文<<