java爬蟲技術—內功修煉之網絡爬蟲爬取流程（四）

    看着下面的小奇和一張張求知若渴的表情，對未知充滿了好奇，又想起當年的自己不也是這樣嗎，長老也是滿臉的欣慰，繼續開始自己的講解，下面說說數據爬取的流程。     數據爬取主要分四個步驟：爬取對象準備-->頁面數據抓取-->數據解析處理-->數據持久存儲。     爬取對象準備：即數據爬取的入口，也就是我們要爬取的種子URL，把需要爬取的URL統一的放到一個指定的集合中等待分配爬取。    

>>阅读原文<<