Scrapy不方便調試,但是為了深入學習框架內部的一些原理,有時候僅僅依靠日志是不夠的。下面提供一種scrapy的debug方式
demo直接用來自官方例子來演示:https://github.com/scrapy/quotesbot
在運行 scrapy 庫時,其實是相當於運行一個 python 腳本:
#!/usr/bin/python from scrapy.cmdline import execute execute()
所以,我們將上面的代碼保存為一個 debug.py 的文件在 scrapy 項目目錄下
接着配置調試器,如下
接下來,直接在debug.py中就可以以此為入口調試了