爬取數據保存至mysql數據庫

做爬蟲，免不了將抓取下來的數據保存到數據庫，但是如何保存到數據庫呢，下面我通過我工作中抓取的一個網站來展示，代碼有點多，但是邏輯很簡單，此例是將view Details的鏈接保存在了mysql中，先看看網站是什麼樣子： 下邊這個圖是頁碼 網站是這個樣子，我在代碼中有個判斷，就是判斷鏈接是否有三個，分別執行不同操作，就是根據圖中標記來的 此次請求是get請求，不需要傳參，只需要重新拼接url進行翻頁

>>阅读原文<<