Change the connection pool size for Python#39;s quot;requestsquot; module when in Threading(在线程处理中更改Python请求模块的连接池大小(Q))
本文介绍了在线程处理中更改Python请求模块的连接池大小(&Q)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
(编辑:这个错误的意思可能我弄错了。这是否表明我的客户端的连接池已满?或者服务器上的连接池已满,而这就是向我的客户端提供的错误?)
我正在尝试使用pythonthreading
和requests
模块并发发出大量http
请求。我在日志中看到此错误:
WARNING:requests.packages.urllib3.connectionpool:HttpConnectionPool is full, discarding connection:
如何才能增加请求的连接池大小?
推荐答案
这应该会起作用:
import requests.adapters
session = requests.Session()
adapter = requests.adapters.HTTPAdapter(pool_connections=100, pool_maxsize=100)
session.mount('http://', adapter)
response = session.get("/mypage")
这篇关于在线程处理中更改Python请求模块的连接池大小(&Q)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
沃梦达教程
本文标题为:在线程处理中更改Python请求模块的连接池大小(&Q)
猜你喜欢
- python-m http.server 443--使用SSL? 2022-01-01
- 沿轴计算直方图 2022-01-01
- 如何将一个类的函数分成多个文件? 2022-01-01
- pytorch 中的自适应池是如何工作的? 2022-07-12
- padding='same' 转换为 PyTorch padding=# 2022-01-01
- 使用Heroku上托管的Selenium登录Instagram时,找不到元素';用户名'; 2022-01-01
- 如何在 Python 的元组列表中对每个元组中的第一个值求和? 2022-01-01
- 分析异常:路径不存在:dbfs:/databricks/python/lib/python3.7/site-packages/sampleFolder/data; 2022-01-01
- python check_output 失败,退出状态为 1,但 Popen 适用于相同的命令 2022-01-01
- 如何在 python3 中将 OrderedDict 转换为常规字典 2022-01-01