【Scrapy】如何使scrapy爬取信息不打印在命令窗口中

如何使scrapy爬取信息不打印在命令窗口中

• 一般采用該條命令啟動

scrapy crawl [spider_name]

• 但是，由這條命令啟動的爬蟲，會將所有爬蟲運行中的debug信息及抓取到的信息打印在運行窗口中。很亂，也不方便查詢。所以，可使用該命令代替：

scrapy crawl [spider_name]  -s LOG_FILE=spider.log

這樣就會將原本打印在窗口的所有信息保存在spider.log的文件里了。可以在項目根目錄中找到該文件，查看所有爬取信息。