Scrapy項目 - 實現騰訊網站社會招聘信息爬取的爬蟲設計

       通過使Scrapy框架，進行數據挖掘和對web站點頁面提取結構化數據，掌握如何使用Twisted異步網絡框架來處理網絡通訊的問題，可以加快我們的下載速度，也可深入接觸各種中間件接口，靈活的完成各種需求，使得我們的爬蟲更強大、更高效。       熟悉掌握基本的網頁和url分析，同時能靈活使用Xmind工具對Python爬蟲程序（網絡爬蟲）流程圖進行分析。同時，使用Weka 3.7工具

>>阅读原文<<