Playwright (Node.js, Python)
- 启动浏览器时配置:chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } })。
- 每个上下文独立代理:browser.newContext({ proxy: { server, username, password } })。单个浏览器实例即可运行多个上下文,每个上下文拥有独立 IP,开销远低于启动多个浏览器实例。
- Python 采用相同的字典结构:p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"})。
- Playwright 中的 Firefox 和 WebKit 支持完全相同的代理配置。
Puppeteer
- 使用命令行参数启动浏览器:puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] })。
- 针对每个页面,在执行 page.goto 之前调用 await page.authenticate({ username: "user", password: "pass" })。
- 如果需要在单个浏览器内使用多个代理,现代 Puppeteer 版本可使用 browser.createBrowserContext({ proxyServer: "http://IP:PORT" }),并配合在每个页面上调用 page.authenticate。
- 通过访问 https://api.ipify.org 并读取响应内容来验证网络连通性。
Selenium 可以使用带账号密码的代理吗?
可以,但无法直接支持。ChromeDriver 没有代理账号密码参数,而 Chrome 的代理认证弹窗也无法通过标准 Selenium 进行控制。常见的解决方法包括:使用支持 http://user:pass@IP:PORT 格式代理的 selenium-wire 库 (Python);创建一个轻量 Chrome 扩展来处理认证事件并在启动时加载;或使用已保存代理凭据的 Firefox 配置文件。对于新项目,Playwright 处理起来要简单得多。
长期通过代理运行 Playwright 和 Puppeteer 时需要注意什么?
请设置超时并在网络出错时重试,使用完毕后关闭页面和上下文,并限制每个 IP 的并发会话数以避免 429 错误。
- 设置合理的导航超时时间(30–60 秒),并针对临时网络故障实现重试逻辑。
- 任务完成后及时关闭页面与上下文,避免空闲连接泄漏。
- 限制单个 IP 上运行的并发会话数;若来自单个地址的请求量过高,目标服务可能会返回 429 状态码。
- 保持上下文的时区和语言区域与代理所在国家一致(Playwright 中的 timezoneId 与 locale)。
需要代理?购买独享代理,支持自动开通
9国独享 IPv4 代理,购买 2.000 个 IP 起低至 20.000₫/IP/月(单购 1 个 IP 为 39.000₫),以及越南、US 静态 ISP 代理。支持 HTTP(S) 和 SOCKS5 用户名密码认证,不限流量,付款后自动开通配置。请注意,越南代理目前采用 HTTP(S) 协议,暂不支持 SOCKS5。
立即购买代理