網站抓取頻率低的原因及解決方法

我們在SEO優化一個網站時候，會時常去關注網站日誌，進而來分析搜索引擎蜘蛛爬取極其抓取過程。從這上面我們可以得到很多信息，如頁面爬取時間，蜘蛛喜歡的頁面，對蜘蛛爬取造成負擔的頁面等，這些都是可以從網站日誌中得出的結論。長時間的歸納總結對比，不難發現網站存在的一些潛在問題。 通過百度資源後臺我們還能通過抓取頻率來大致得出網站的優缺點，但在很多小站中，抓取頻率是極其不穩定的，忽高忽低，如坐過山車似的。

>>阅读原文<<