Python网络错误处理全攻略
时间:2026-03-13 17:15:43 420浏览 收藏
Python网络请求异常无法完全避免,但通过精准捕获特定异常类型(如Timeout、ConnectionError、HTTPError)、分离连接与读取超时、对临时性错误实施指数退避重试、并记录含URL、状态码、完整traceback等关键上下文的日志,就能让异常变得可预测、可恢复、易排查——真正可靠的网络代码不在于“不出错”,而在于“出错时依然稳健、透明且可控”。

Python 网络请求出错很常见,关键不是避免异常,而是让异常可预测、可捕获、可恢复。核心原则是:明确捕获具体异常、区分临时性与永久性错误、设置合理重试与超时、不吞掉异常信息。
只捕获你准备处理的网络异常
用 requests 或 urllib 时,不要写 except Exception: —— 这会掩盖编程错误(比如变量名写错)或系统级问题(如内存不足)。应精准捕获网络相关异常:
- requests.exceptions.Timeout:连接或读取超时,通常可重试
- requests.exceptions.ConnectionError:DNS失败、拒绝连接、网络断开等,多数属临时故障
- requests.exceptions.HTTPError:状态码非 2xx(如 404、503),需按状态码逻辑判断——4xx 一般不重试,5xx 可考虑重试
- requests.exceptions.RequestException:作为顶层基类,仅在兜底日志记录时使用,不用于业务逻辑分支
为超时设两道防线:连接 + 读取
只设一个总超时(如 timeout=10)不够健壮。网络卡在建连阶段(DNS解析、TCP握手)和卡在响应阶段(服务端慢、大文件传输)性质不同,应分开控制:
- 连接超时(connect timeout)建议 3–5 秒:DNS 和 TCP 建连本该很快,超时说明下游不可达或防火墙拦截
- 读取超时(read timeout)视业务而定,通常 10–30 秒:允许服务端有合理处理时间,但防无限等待
- 示例:requests.get(url, timeout=(3.5, 20)) 表示 3.5 秒内必须连上,连上后最多等 20 秒收完响应
对临时性错误做带退避的重试
ConnectionError 和 Timeout 多数是瞬时问题,重试有效;但盲目重试会加重服务压力。推荐用指数退避(exponential backoff):
- 首次失败后等 1 秒,再失败等 2 秒,再失败等 4 秒……上限建议 10 秒内
- 限制总重试次数(如最多 3 次),避免雪球效应
- 用 tenacity 库最省心:@retry(stop=stop_after_attempt(3), wait=wait_exponential(multiplier=1, min=1, max=10))
- 注意:重试前检查是否已产生副作用(如 POST 已提交订单),幂等性设计比重试更重要
记录足够上下文,方便定位真实原因
捕获异常时,别只打 print(e)。至少记录:
- 请求 URL、HTTP 方法、关键参数(脱敏后)
- 异常类型 + 完整 traceback(用 logging.exception())
- 如果响应已收到(如 status_code=503),记下状态码和响应头(如 X-RateLimit-Remaining)
- 对调试友好的日志级别:ConnectionError 和 Timeout 用 WARNING,HTTPError 中的 4xx 用 INFO,5xx 用 ERROR
今天带大家了解了的相关知识,希望对你有所帮助;关于文章的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~
相关阅读
更多>
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
最新阅读
更多>
-
468 收藏
-
489 收藏
-
167 收藏
-
282 收藏
-
277 收藏
-
486 收藏
-
470 收藏
-
418 收藏
-
217 收藏
-
226 收藏
-
403 收藏
-
171 收藏
课程推荐
更多>
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习