python+ubuntu 怎麼做自動定時爬蟲

爬蟲工程師在工作時，有時候需要做到定時爬蟲，下面是代碼寫好之後，如何添加定時任務的過程（無論是requests還是scrapy框架爬蟲，都可以使用） 1.在當前目錄下增加一個可執行的腳本 requests在當前目錄下， scrapy在配置文件scrapy.cfg目錄下增加 腳本內容如下; 腳本內容如下; #!/bin/sh export PATH=$PATH:/home/python/.loca

>>阅读原文<<