爬蟲任務設計要有父子概念,即抓取網站和抓取任務的概念

對於抓取任務有個自動統計,原本統計如下,現在需要改成 橫着來的形式 由於一個網站分成了,市場價,出廠價的抓取,所有麼有一個父子關係的話,不好統一起來。。 還是要像之前想的設計一樣,有個父子關係,網站最大,然後網站下面可以有多個任務 一個網站可以對應多個任務
相關文章
相關標籤/搜索