Linux服務器爬蟲+Mysql瑣碎筆記01

這兩天搞了個爬蟲放在服務器上面爬機器學習的數據，有一些細碎的東西分享。python 一開始用的sqlite3做爲數據庫，後來沒過幾個小時就報錯database is locked了。。在這裏提醒你們爬大量的數據尤爲是刷新頻率精確到秒的。。千萬別用sqllite3。。。 而後安裝mysql，mysql對於ubuntu不大友好，不少依賴的庫和命令（好比libaio.so）等等缺乏，實在麻煩，後來把系統

>>阅读原文<<