python - ConnectionError，URL超过了最大重试次数(由None引起)

它说的是什么意思:

requests.exceptions.ConnectionError: None: Max retries exceeded with url: /myurl (Caused by None)

具体来说，“无人引起”是什么意思？

我在同一台计算机上运行一个python客户端和一个简单的clojure服务器。该服务器在具有4个线程的compojure + http-kit上运行。客户端通过多处理使用3到4个进程连续提交POST请求.Pool包含3个工作进程。

每隔一段时间，客户端就会死于上述的ConnectionError。我在客户端设置了retries = 3，并将服务器上的队列大小增加到1000000，没有任何效果。

任何帮助，将不胜感激。

编辑:更正，我实际上是在发送POST请求而不是GET。

实际脚本太大，无法在此处发布，但基本上它的工作原理是这样的。我有一个函数，它使用一些数据调用发布:

def post_func(my_data, config):
    return requests.post(my_url, data=json.dumps({"data": my_data, "config": config}))

包装multiprocessing.Pool的类:

class Executor(object):
    def __init__(self, nprocs):
        self.pool = Pool(processes=nprocs)

    def execute(self, func, list_of_data):
        return self.pool.map(func, list_of_data)

另一个使用不同配置调用Executor.execute()的函数:

function eval(executor, list_of_data, config):
    start = timer()
    func = partial(post_func, config=config)
    results = executor.execute(func, list_of_data)
    taken = timer()-start
    return results

单个执行程序可用于所有eval()调用。然后将eval()包装在一个计分函数中，并赋予pyswarm进行优化:

pso(score_func, lbs, ubs, swarmsize=20, maxiter=20, debug=True)

编辑:我可能应该早些做些什么，但是正确捕获ConnectionError给我这个:

ConnectionError: HTTPConnectionPool(host='127.0.0.1', port=5000): Max retries exceeded with url: /my_url (Caused by NewConnectionError('<requests.packages.urllib3.connection.HTTPConnection object at 0x7f0ccb4b5550>: Failed to establish a new connection: [Errno 99] Cannot assign requested address',))

我现在重写了脚本以重复使用单个request.Session，它将很快知道是否可以解决问题。

最佳答案

重用单个请求 session 对我来说解决了这个问题。