电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

Python requests timeout的設置

瀏覽:4日期:2022-06-22 10:28:14
背景

最近在搞爬蟲,很多小組件里面都使用了 Python 的 requests 庫,很好用,很強大。

但最近發現很多任務總是莫名其妙的卡住,不報錯,但是就是不繼續執行。

排查了一圈,最后把問題鎖定在 requests 的 timeout 機制上。

注:本文討論的是 Python 的第三方模塊 requests,并不是 Python 內建模塊 urllib 中的 request 模塊,請注意區分。

如何設置超時時間

requests 設置超時時間有兩種方式。

一種是設置單一值作為 timeout,如下所示:

r = requests.get(’https://github.com’, timeout=5)

這時, timeout 值將會用作 connect 和 read 二者的共同的超時時間。

另一種是分別制定連接超時和讀取超時的時間,如下所示:

r = requests.get(’https://github.com’, timeout=(3.05, 27))

這里前面的 3.05 表示連接超時時間,27 表示讀取超時時間。

官方一般推薦大家把連接超時時間設置為比 3 的整數倍稍微大一點的時間,比如 3.05、6.05 這樣,具體原因見 這里。

上面提到的兩種超時時間,連接超時和讀取超時,并不是都有默認超時時間。

連接超時的默認時間是 21s,而讀取超時沒有默認時間,換句話說,不會超時。

也就是說,如果一個請求,連接成功了,正在讀取數據,但是此時服務器出現了什么問題,或者代理出現了什么問題,那么,這個請求就會一直卡住,不會報錯,也不會繼續。

天長地久。

避坑

所以,為了避免出現這樣的情況,給你的 requests 加上超時時間吧,尤其是請求量巨大的時候。

常在河邊走,哪有不濕鞋。

參考資料

Requests 官方文檔

補:python requests timeout不起作用 卡死

在使用python 的requests進行數據請求時不設置timeout大部分時候,是會有超時異常的,超時時間大概是20多秒

但是有時候超時會不起作用需要自己制定超時時間,使用timeout=60

response = requests.get(url, headers=headers, proxies=proxies,timeout=60)

但是有時候設置此參數之后仍然會有幾分鐘甚至是十幾分鐘沒有返回結果可以使用timeout=(50, 60)

timeout參數也可以傳入一個包含兩個簡單浮點數的元組,用來分別設置請求超時時間和讀取超時時間。

response = requests.get(url, headers=headers, proxies=proxies,timeout=(50, 60))

到此這篇關于Python requests timeout的設置的文章就介紹到這了,更多相關Python requests timeout內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網!

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 储气罐,真空罐,缓冲罐,隔膜气压罐厂家批发价格,空压机储气罐规格型号-上海申容压力容器集团有限公司 | 培训中心-海南香蕉蛋糕加盟店技术翰香原中心官网总部 | 糖衣机,除尘式糖衣机,全自动糖衣机,泰州市长江制药机械有限公司 体感VRAR全息沉浸式3D投影多媒体展厅展会游戏互动-万展互动 | 检验科改造施工_DSA手术室净化_导管室装修_成都特殊科室建设厂家_医疗净化工程公司_四川华锐 | 广东恩亿梯电源有限公司【官网】_UPS不间断电源|EPS应急电源|模块化机房|电动汽车充电桩_UPS电源厂家(恩亿梯UPS电源,UPS不间断电源,不间断电源UPS) | 辐射色度计-字符亮度测试-反射式膜厚仪-苏州瑞格谱光电科技有限公司 | 翻斗式矿车|固定式矿车|曲轨侧卸式矿车|梭式矿车|矿车配件-山东卓力矿车生产厂家 | 旗杆生产厂家_不锈钢锥形旗杆价格_铝合金电动旗杆-上海锥升金属科技有限公司 | 河南不锈钢水箱_地埋水箱_镀锌板水箱_消防水箱厂家-河南联固供水设备有限公司 | 环保袋,无纺布袋,无纺布打孔袋,保温袋,环保袋定制,环保袋厂家,环雅包装-十七年环保袋定制厂家 | 电子书导航网_电子书之家_电子书大全_最新电子书分享发布平台 | 温泉机设备|温泉小镇规划设计|碳酸泉设备 - 大连连邦温泉科技 | 游动电流仪-流通式浊度分析仪-杰普仪器(上海)有限公司 | 硫化罐-电加热蒸汽硫化罐生产厂家-山东鑫泰鑫智能装备有限公司 | MTK核心板|MTK开发板|MTK模块|4G核心板|4G模块|5G核心板|5G模块|安卓核心板|安卓模块|高通核心板-深圳市新移科技有限公司 | 自动钻孔机-全自动数控钻孔机生产厂家-多米(广东)智能装备有限公司 | 一氧化氮泄露报警器,二甲苯浓度超标报警器-郑州汇瑞埔电子技术有限公司 | 工装定制/做厂家/公司_工装订做/制价格/费用-北京圣达信工装 | 青岛空压机,青岛空压机维修/保养,青岛空压机销售/出租公司,青岛空压机厂家电话 | 华中线缆有限公司-电缆厂|电缆厂家|电线电缆厂家 | 动物解剖台-成蚊接触筒-标本工具箱-负压实验台-北京哲成科技有限公司 | 贵阳用友软件,贵州财务软件,贵阳ERP软件_贵州优智信息技术有限公司 | 离子色谱自动进样器-青岛艾力析实验科技有限公司 | 冲锋衣滑雪服厂家-冲锋衣定制工厂-滑雪服加工厂-广东睿牛户外(S-GERT) | 食品质构分析仪-氧化诱导分析仪-瞬态法导热系数仪|热冰百科 | 对辊破碎机_四辊破碎机_双齿辊破碎机_华盛铭重工 | 证券新闻,热播美式保罗1984第二部_腾讯1080p-仁爱影院 | 温湿度记录纸_圆盘_横河记录纸|霍尼韦尔记录仪-广州汤米斯机电设备有限公司 | 流程管理|流程管理软件|企业流程管理|微宏科技-AlphaFlow_流程管理系统软件服务商 | 西门子伺服控制器维修-伺服驱动放大器-828D数控机床维修-上海涌迪 | 合肥角钢_合肥槽钢_安徽镀锌管厂家-昆瑟商贸有限公司 | 香港新时代国际美容美发化妆美甲培训学校-26年培训经验,值得信赖! | 培训中心-海南香蕉蛋糕加盟店技术翰香原中心官网总部 | IWIS链条代理-ALPS耦合透镜-硅烷预处理剂-上海顶楚电子有限公司 lcd条形屏-液晶长条屏-户外广告屏-条形智能显示屏-深圳市条形智能电子有限公司 | 深圳办公室装修-写字楼装修设计-深圳标榜装饰公司 | 钢格板_钢格栅_格栅板_钢格栅板 - 安平县鑫拓钢格栅板厂家 | 泰兴市热钻机械有限公司-热熔钻孔机-数控热熔钻-热熔钻孔攻牙一体机 | 沥青车辙成型机-车托式混凝土取芯机-混凝土塑料试模|鑫高仪器 | 高压互感器,电流互感器,电压互感器-上海鄂互电气科技有限公司 | 盐城网络公司_盐城网站优化_盐城网站建设_盐城市启晨网络科技有限公司 | 写方案网_方案策划方案模板下载|