Basisconfiguratie
- Formatteer de ip:port:user:pass-string naar een URL: proxy_url = "http://user:pass@IP:PORT".
- Declareer beide sleutels: proxies = {"http": proxy_url, "https": proxy_url}. De "https"-sleutel verwijst nog steeds naar een URL die begint met http:// omdat ONET-proxies HTTP-proxies zijn; requests gebruikt automatisch CONNECT voor HTTPS-sites.
- Verstuur het verzoek: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Het resultaat moet het proxy-IP zijn.
- Schrijf niet "https": "https://IP:PORT". ONET-proxies accepteren zelf geen TLS-verbindingen en zullen een SSL-fout retourneren of de verbinding sluiten.
Hoe gebruikt u in requests proxy's met speciale tekens in het wachtwoord?
URL-encodeer de gebruikersnaam en het wachtwoord vóór het samenstellen: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Zonder deze stap zorgen @- of :-tekens in het wachtwoord ervoor dat requests het proxy-adres verkeerd parseert.
Gebruik van Session en retries
- Maak s = requests.Session(); s.proxies.update(proxies). Alle verzoeken via s delen de proxy en behouden verbindingen, wat sneller is dan herhaaldelijk requests.get aanroepen.
- Koppel een HTTPAdapter met Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) om automatisch opnieuw te proberen bij tijdelijke fouten.
- Stel altijd een timeout in. Zonder timeout kan een haperende verbinding je programma voor onbepaalde tijd laten vastlopen.
- De omgevingsvariabele HTTPS_PROXY wordt ook gelezen door requests, tenzij je s.trust_env = False instelt.
Met httpx
Vanaf httpx 0.26 geef je de proxy door via de proxy-parameter: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Oudere versies gebruiken proxies={"all://": url}. httpx ondersteunt async (httpx.AsyncClient) als je gelijktijdige verzoeken wilt uitvoeren.
Welke proxyfouten treden vaak op bij Python requests?
De drie meest voorkomende fouten zijn 407 door een onjuiste gebruikersnaam of een verkeerd wachtwoord, time-outs omdat de proxy onbereikbaar is en 429 door limieten op de doelsite.
ProxyError … 407 Proxy Authentication Required
Onjuiste gebruikersnaam of wachtwoord, of speciale tekens zijn niet gecodeerd.
ConnectTimeout of ProxyError … timed out
Kan de proxy niet bereiken: onjuist IP-adres, poort of netwerkblokkade. Controleer dit met curl.
HTTP 429 van doelsite
Snelheidslimiet bereikt op de doelsite (rate-limited). Verlaag het aantal verzoeken per IP, voeg vertragingen toe of verdeel de belasting over meerdere proxies.
Nog geen proxy? Koop dedicated proxies met automatische activatie
Dedicated IPv4-proxies in 9 landen vanaf 20.000₫/IP/maand bij afname van 2.000 IP's of meer (39.000₫ voor 1 IP), plus statische ISP-proxies in Vietnam en de VS. HTTP(S) en SOCKS5 met gebruikersnaam en wachtwoord, onbeperkte bandbreedte, automatisch geleverd na betaling. Proxies in Vietnam ondersteunen momenteel alleen HTTP(S), zonder SOCKS5.
Koop nu proxies