深圳租房信息爬蟲

考慮到之後可能會在深圳工做，因此寫了這個爬蟲，但願對本身的找房過程提供一些便捷。

信息來源是豆瓣的深圳租房小組（想爬取其餘城市只須要更換一下URL就好）。

大家必定會說這麼麻煩幹什麼，租房APP不是直接看麼？我也是這麼想的。。。可是租房APP上中介比較多，豆瓣上可能是我的房源，中介少，比較可靠。但豆瓣APP沒有篩選功能，只是至關於百度貼吧同樣的瀏覽界面。

因此我提供了價格篩選功能，目前設定的是2000/月。

我把它按標題，帖子連接，正文的順序保存在txt文件下，便於分享。

如下是效果圖↓

由於有些帖子的正文沒有內容，因此是空行

代碼↓

由於headers比較長因此我省略了一部分，比較遺憾的是不會操做PDF文件，否則就能夠把圖片也寫進去。（中間由於請求太頻繁豆瓣還把個人帳號鎖定了0.0）