在线程处理中更改Python请求模块的连接池大小(&Q) [英] Change the connection pool size for Python's "requests" module when in Threading

查看:37
本文介绍了在线程处理中更改Python请求模块的连接池大小(&Q)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

(编辑:这个错误的意思可能我弄错了。这是否表明我的客户端的连接池已满?或者服务器上的连接池已满,而这就是向我的客户端提供的错误?)

我正在尝试使用pythonthreadingrequests模块并发发出大量http请求。我在日志中看到此错误:

WARNING:requests.packages.urllib3.connectionpool:HttpConnectionPool is full, discarding connection:

如何才能增加请求的连接池大小?

推荐答案

这应该会起作用:

import requests.adapters

session = requests.Session()
adapter = requests.adapters.HTTPAdapter(pool_connections=100, pool_maxsize=100)
session.mount('http://', adapter)
response = session.get("/mypage")

这篇关于在线程处理中更改Python请求模块的连接池大小(&Q)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆