Alapkonfiguráció
- Formázza az ip:port:user:pass karakterláncot URL-formátumra: proxy_url = "http://user:pass@IP:PORT".
- Adja meg mindkét kulcsot: proxies = {"http": proxy_url, "https": proxy_url}. A "https" kulcs továbbra is http:// kezdetű URL-re mutat, mivel a(z) ONET proxyk HTTP proxyk; a requests automatikusan a CONNECT metódust használja HTTPS oldalak esetén.
- Küldje el a kérést: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Az eredménynek a proxy IP-címének kell lennie.
- Ne írja úgy, hogy "https": "https://IP:PORT". A(z) ONET proxyk maguk nem fogadnak TLS kapcsolatokat, és SSL-hibát dobnak vagy lezárják a kapcsolatot.
Hogyan használhat speciális karaktereket tartalmazó jelszavú proxyt a requests modulban?
URL-kódolja a felhasználónevet és a jelszót az összefűzés előtt: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". E lépés nélkül a jelszóban található @ vagy : karakterek miatt a requests hibásan értelmezi a proxy címét.
A Session és az újrapróbálkozások használata
- Hozza létre: s = requests.Session(); s.proxies.update(proxies). Az s objektumon keresztül küldött minden kérés megosztja a proxyt és fenntartja a kapcsolatokat, ami gyorsabb, mint a requests.get ismételt meghívása.
- Csatoljon egy HTTPAdapter példányt a következővel: Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]), hogy automatikusan újrapróbálkozzon átmeneti hibák esetén.
- Mindig állítson be időtúllépést (timeout). Időtúllépés nélkül a beragadt kapcsolat a végtelenségig lefagyaszthatja a programját.
- A HTTPS_PROXY környezeti változót is beolvassa a requests, kivéve, ha beállítja a s.trust_env = False értéket.
A httpx használatával
A httpx 0.26 verziótól kezdve a proxyt a proxy paraméterrel adhatja át: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). A régebbi verziók a proxies={"all://": url} szintaxist használják. A httpx támogatja az aszinkron működést (httpx.AsyncClient), ha egyidejű kéréseket kell futtatnia.
Milyen proxyhibákkal találkozik leggyakrabban a Python requests?
A három gyakori hiba a helytelen felhasználónév vagy jelszó miatti 407, a proxy elérésének meghiúsulásából adódó időtúllépés, valamint a célwebhely sebességkorlátozásából fakadó 429.
ProxyError … 407 Proxy Authentication Required
Helytelen felhasználónév vagy jelszó, vagy a speciális karakterek nem lettek kódolva.
ConnectTimeout vagy ProxyError … timed out
A proxy nem érhető el: helytelen IP, port vagy hálózati tiltás. Ellenőrizze curl segítségével.
HTTP 429 a céloldalról
A céloldal korlátozta a kérések gyakoriságát (rate limit). Csökkentse az IP-nkénti kérések számát, iktasson be késleltetést, vagy ossza el a terhelést több proxy között.
Nincs még proxyja? Vásároljon dedikált proxykat automatikus aktiválással
Dedikált IPv4 proxyk 9 országban már 20.000₫/IP/hó ártól legalább 2.000 IP vásárlása esetén (39.000₫ 1 IP esetén), valamint vietnámi és US statikus ISP proxyk. HTTP(S) és SOCKS5 felhasználónévvel és jelszóval, korlátlan sávszélesség, fizetés után automatikusan aktiválva. A vietnámi proxyk jelenleg csak a HTTP(S)-t támogatják, a SOCKS5-öt nem.
Vásároljon proxyt most