Scrapy不方便调试,但是为了深入学习框架内部的一些原理,有时候仅仅依靠日志是不够的。下面提供一种scrapy的debug方式
demo直接用来自官方例子来演示:https://github.com/scrapy/quotesbot
在运行 scrapy 库时,其实是相当于运行一个 python 脚本:
#!/usr/bin/python from scrapy.cmdline import execute execute()
所以,我们将上面的代码保存为一个 debug.py 的文件在 scrapy 项目目录下
接着配置调试器,如下
接下来,直接在debug.py中就可以以此为入口调试了