Hawk 數據抓取工具 使用說明(二)

1. 調試模式和執行模式 1.1.調試模式 系統能夠通過拖拽構造工作流。在編輯流的過程中,處於調試模式,爲了保證快速地計算和顯示當前結果(只顯示前20個數據,可在調試的採樣量中修改),此時,所有執行器都不會參與到工作流中,意味着數據庫和數據表都不會被寫入和更新。 (是否記得所有模塊分爲 生成,轉換,過濾和執行四類?) 在調試時,從爬蟲轉換模塊可能會請求web數據,爲了提升性能,該模塊對請求做了緩存
相關文章
相關標籤/搜索