我知道与命令:
scrapy crawl somespider -s JOBDIR=crawls/somespider-1
我可以使用CTRL + C暂停/恢复抓取。
我想知道的是如何重新设置工作流程并从头开始。是否有我需要删除/清空的文件？
M.
最佳答案
是的，您应该删除自己的JOBDIR
scrapy crawl somespider -s JOBDIR=crawls/somespider-1
<ctr+C>
rm -rf crawls/somespider-1
我可以使用CTRL + C暂停/恢复抓取。
我想知道的是如何重新设置工作流程并从头开始。是否有我需要删除/清空的文件？
M.