Python爬蟲總結

由於某些原因最近終於可以從工作的瑣事中抽出身來，有時間把之前的一些爬蟲知識進行了一個簡單的梳理，也從中體會到階段性地對過往知識進行梳理是真的很有必要。 常用第三方庫 對於爬蟲初學者，建議在瞭解爬蟲原理以後，在不使用任何爬蟲框架的情況下，使用這些常用的第三方庫自己實現一個簡單的爬蟲，這樣會加深對爬蟲的理解。 urllib和requests都是python的HTTP庫，包括urllib2模塊以巨大的復

>>阅读原文<<