python數據抓取

通過折騰,python果真是數據抓取的利器。 火車頭類的東西,之後我怕是用不上了,用python本身寫,速度快並且透明。 數據抓取的大概步驟 1.抓取列表頁面連接 2.根據連接,抓取內容,並保存到數據庫 如下是cnblog的新聞爲例,使用sqlite作數據庫(python內置的,固然是首選的) 1.getnewsList.py # -*- coding:utf-8 -*- from bs4 imp
相關文章
相關標籤/搜索