python實現scrapy定時執行爬蟲

在scrapy項目中寫一個定時爬蟲的程序main.py ，直接放在scrapy的存儲代碼的目錄中就能設定時間定時多次執行。

import time
import os
 
while True:
    os.system("scrapy crawl News")
    time.sleep(86400)  #每隔一天運行一次 24*60*60=86400s