Playwright (Node.js, Python)
- ブラウザ起動時:chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } })。
- コンテキストごとに1つのプロキシ:browser.newContext({ proxy: { server, username, password } })。1つのブラウザインスタンスで複数のコンテキストを実行でき、それぞれが独自のIPを持つため、複数のブラウザを起動するよりもオーバーヘッドを大幅に削減できます。
- Pythonでは辞書形式で同様の構造を使用します:p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"})。
- PlaywrightのFirefoxおよびWebKitでも、まったく同じプロキシ設定を使用できます。
Puppeteer
- コマンドラインフラグを指定してブラウザを起動します:puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] })。
- 各ページで、page.gotoの呼び出し前にawait page.authenticate({ username: "user", password: "pass" })を実行します。
- 単一ブラウザ内で複数のプロキシが必要な場合は、最新バージョンのPuppeteerで各ページのpage.authenticateと併せてbrowser.createBrowserContext({ proxyServer: "http://IP:PORT" })を使用します。
- https://api.ipify.orgにアクセスしてレスポンス本文を確認し、接続を検証します。
Seleniumでユーザー名とパスワード付きのプロキシを使用できますか?
可能ですが、直接は利用できません。ChromeDriverにはプロキシのユーザー名とパスワードを指定するパラメータがなく、標準のSeleniumではChromeのプロキシ認証ダイアログを制御できません。一般的な回避策としては、http://user:pass@IP:PORT 形式を受け付けるselenium-wireライブラリ(Python)の使用、認証イベントを処理する軽量なChrome拡張機能を作成して起動時に読み込む方法、またはプロキシ認証情報を保存したプロファイルでFirefoxを使用する方法があります。新規プロジェクトであれば、Playwrightを使用する方がはるかに簡単です。
PlaywrightやPuppeteerをプロキシ経由で長期運用する際の注意点は何ですか?
タイムアウトを設定してネットワークエラー時に再試行し、処理完了時にはページとコンテキストを閉じ、429エラーを回避するためにIPあたりの同時セッション数を制限してください。
- 適切なナビゲーションタイムアウト(30–60秒)を設定し、一時的なネットワーク障害に対するリトライロジックを実装します。
- アイドル状態の接続リークを防ぐため、処理完了後は速やかにページとコンテキストを閉じます。
- 単一IPで実行する同時セッション数を制限します。1つのアドレスからのリクエスト数が多すぎる場合、ターゲットサービスから429が返される可能性があります。
- コンテキストのタイムゾーンとロケールをプロキシの国に合わせます(PlaywrightのtimezoneId、locale)。
プロキシが必要ですか?自動有効化対応の専用プロキシを購入
2.000 IP以上のご購入で月額20.000₫/IPから(1 IPの場合は39.000₫)利用可能な9カ国の専用IPv4プロキシ、およびベトナム・米国の静的ISPプロキシ。ユーザー名・パスワード認証のHTTP(S)およびSOCKS5対応、無制限の帯域幅、お支払い完了後に自動プロビジョニングされます。なお、ベトナムのプロキシは現在HTTP(S)プロトコルのみ対応しており、SOCKS5は未サポートです。
プロキシを今すぐ購入