使用代理时为什么会遇到 503 错误?
503 错误通常源自以下三个方面之一:网站过载或维护、目标网站的反爬虫系统拦截,或是代理服务器暂时无法建立连接。
网站过载或正在维护
无论是否使用代理,网站都会向所有人返回 503。通常会伴随维护页面以及 Retry-After 响应头。
网站拦截自动化请求
部分反爬虫系统会对类似机器人的请求返回 503 或验证挑战页面:例如缺少 Cookie、未执行 JavaScript 或请求频率过高。真实浏览器通常可以正常访问,而直接发起的自动化请求则会失败。
代理暂时无法建立连接
curl -v 在 CONNECT 后立即显示 503:表示代理当时无法连接到目标网站。这通常会在几分钟后自行恢复。
逐步排查指南
- 使用本地直连网络打开该网站。如果仍返回 503,说明问题出在目标网站,请等待其恢复。
- 通过代理打开 https://api.ipify.org。如果该页面可以正常加载,说明代理仍在正常工作。
- 运行 curl -v -x http://IP:PORT -U user:pass https://trang-dich 并查看 CONNECT 后的一行,以确认是代理还是目标网站返回了 503。
- 如果仅自动化程序遇到 503 而浏览器可以正常访问,说明网站正在过滤机器人:请降低请求频率、持久化 Cookie,并使用自动化浏览器(Playwright)代替直接发送请求。
- 如果针对所有网站均持续出现来自代理的 503 错误,请联系 ONET 技术支持并提供代理 IP 及报错时间。
在源码中如何处理 503 错误?
将 503 视为临时性错误:采用指数退避延迟进行重试,并设置最大重试次数上限。
- 将 503 视为临时错误:采用指数退避算法进行重试,并遵循 Retry-After 响应头。
- 限制重试次数(例如 3 到 5 次),避免加剧服务器过载。
- 记录错误代码、所使用的代理以及目标网站,以排查错误集中在何处。
- 对于有机器人过滤机制的网站,静态 ISP 代理通常比数据中心 IP 享有更好的信誉与待遇。
需要代理?购买独享代理,即时自动开通
9国独享 IPv4 代理,购买 2.000 个 IP 起低至 20.000₫/IP/月(1 个 IP 售价 39.000₫),以及越南、美国静态 ISP 代理。支持带用户名和密码的 HTTP(S) 与 SOCKS5,不限流量,付款后自动开通。请注意,越南代理目前使用 HTTP(S) 协议,暂不支持 SOCKS5。
立即购买代理