我一直在寻找关于Scrapyd服务的文档,但它很小。我想知道是否有人知道如何设置多个指向同一调度队列的Scrapyd服务器?

最佳答案

我不知道有什么“save schedule queue”,但是通过打开几个屏幕并运行scrapy server,运行多个scrapyd很容易。
您可以通过在项目目录/scrapyd.conf中设置/更改以下选项来调整scrapyd的端口号:

[scrapyd]
http_port = 6969

通过http://doc.scrapy.org/en/latest/topics/scrapyd.html#starting-scrapyd

关于python - 如何运行多个scrapyd服务器?,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/13419734/

10-13 03:31