専用プロキシを使用しているのに429エラーが発生するのはなぜですか?
WebサイトがIPまたはアカウントごとにリクエストの頻度を制限しているためです。スクリプトが単一のIPまたはアカウントからリクエストを過剰に送信した場合、専用プロキシであっても429エラーが発生します。
- アプリケーションが1つのIP経由で過剰な同時リクエストを送信しているためです。ONETの専用プロキシはお客様専用であるため、そのIP上のリクエスト数はすべてお客様自身によって生成されています。
- アカウントまたはAPIキーのレート制限:Webサイトはアカウント単位でリクエストを追跡しているため、IPを変更しても効果はありません。
- 複数のプロファイルやツールで1つのプロキシを共有しているため。
- 失敗直後に即座に再試行したことで、リクエスト数が倍増しているため。
対処法
- 429レスポンスにRetry-Afterヘッダーが存在する場合はそれを読み取り、指定された秒数待機してから次のリクエストを送信する。
- IPごとの同時実行スレッド数を減らし、リクエスト間にランダムな遅延を追加する。
- 連続して再試行するのではなく、エクスポネンシャルバックオフ(1秒、2秒、4秒…)を用いて再試行する。
- リクエストごとに新しいセッションを開くのではなく、セッションとCookieを再利用する。多くのサイトではCookieを持たない訪問者に対してより厳格な制限を適用します。
- 負荷を分散する:複数のプロキシを使用し、各プロキシに処理を分散させます。ONETの専用IPv4プロキシは2.000 IP以上のご購入で20.000₫/IP/月から(1 IPの場合は39.000₫)、帯域幅無制限で利用可能です。
- ダウンロードした結果をキャッシュし、同一リクエストの重複送信を回避する。
エラー429は403、407、503とどう違いますか?
429はリクエスト送信数が多すぎる場合にWebサイトから返されます。407はプロキシの認証情報が無効であることを示し、403と503はWebサイトまたはプロキシのいずれかから返される可能性があります。
| コード | 返却元 | 意味 |
|---|---|---|
| 429 | Webサイト | リクエスト過多。待機してから頻度を落として再試行してください |
| 403 | Webサイトまたはプロキシ | アクセス拒否。Webサイトの場合は通常IPまたはボットによるブロック |
| 407 | プロキシ | プロキシのユーザー名またはパスワードが正しくありません |
| 503 | Webサイトまたはプロキシ | サービスが一時的に利用不可 |
プロキシをお探しですか?自動有効化対応の専用プロキシを購入
9カ国の専用IPv4プロキシが2.000 IP以上のご利用で20.000₫/IP/月から(1 IPの場合は39.000₫)、さらにベトナムおよびUSの静的ISPプロキシも提供。ユーザー名とパスワードによるHTTP(S)およびSOCKS5認証、無制限の帯域幅、お支払い完了後に自動プロビジョニングされます。なお、ベトナムプロキシは現在HTTP(S)のみ対応しており、SOCKS5には対応していませんのでご注意ください。
今すぐプロキシを購入