Osnovna konfiguracija
- Formatirajte string ip:port:user:pass u URL: proxy_url = "http://user:pass@IP:PORT".
- Navedite oba ključa: proxies = {"http": proxy_url, "https": proxy_url}. Ključ "https" i dalje pokazuje na URL koji počinje s http:// jer su ONET proxyji HTTP proxyji; requests automatski koristi CONNECT za HTTPS stranice.
- Pošaljite zahtjev: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Rezultat bi trebao biti IP proxyja.
- Nemojte pisati "https": "https://IP:PORT". ONET proxyji ne prihvataju TLS konekcije prema sebi i vratit će SSL grešku ili prekinuti vezu.
Kako koristiti proxyje sa specijalnim znakovima u lozinci u requests?
URL-enkodirajte korisničko ime i lozinku prije spajanja: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Bez ovog koraka, znakovi @ ili : u lozinki uzrokovat će da requests pogrešno protumači adresu proxyja.
Korištenje Session i ponovnih pokušaja
- Kreirajte s = requests.Session(); s.proxies.update(proxies). Svi zahtjevi upućeni putem s dijele proxy i održavaju konekcije, što je brže od uzastopnog pozivanja requests.get.
- Povežite HTTPAdapter s Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) za automatsko ponavljanje pri prolaznim greškama.
- Uvijek postavite timeout. Bez timeouta, blokirana konekcija može beskonačno zamrznuti vaš program.
- Varijablu okruženja HTTPS_PROXY također čita requests, osim ako ne postavite s.trust_env = False.
Uz httpx
Počevši od httpx 0.26, proslijedite proxy putem parametra proxy: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Starije verzije koriste proxies={"all://": url}. httpx podržava asinhroni rad (httpx.AsyncClient) ako trebate izvršavati konkurentne zahtjeve.
Na koje greške s proxyjem Python requests najčešće nailazi?
Tri uobičajene greške su 407 zbog netačnog korisničkog imena ili lozinke, timeout usljed nemogućnosti povezivanja s proxyjem i 429 zbog ograničenja učestalosti zahtjeva na ciljnoj web stranici.
ProxyError … 407 Proxy Authentication Required
Netačno korisničko ime ili lozinka, ili specijalni znakovi nisu enkodirani.
ConnectTimeout ili ProxyError … timed out
Nije moguće doći do proxyja: netačan IP, port ili mrežna blokada. Provjerite pomoću curl.
HTTP 429 sa odredišne stranice
Ograničenje broja zahtjeva (rate-limit) od strane odredišne stranice. Smanjite broj zahtjeva po IP-u, dodajte pauze ili rasporedite opterećenje na više proxyja.
Nemate proxy? Kupite namjenske proxyje uz automatsku aktivaciju
Namjenski IPv4 proxyji u 9 zemalja od 20.000₫/IP/mjesečno pri kupovini 2.000 IP-ova ili više (39.000₫ za 1 IP), plus statički ISP proxyji iz Vijetnama i SAD-a. HTTP(S) i SOCKS5 uz korisničko ime i lozinku, neograničen protok, automatski aktivirani nakon uplate. Vijetnamski proxyji trenutno podržavaju samo HTTP(S), bez SOCKS5.
Kupite proxyje odmah