Temel yapılandırma
- ip:port:user:pass dizesini bir URL olarak biçimlendirin: proxy_url = "http://user:pass@IP:PORT".
- Her iki anahtarı da tanımlayın: proxies = {"http": proxy_url, "https": proxy_url}. ONET proxy'leri HTTP proxy olduğu için "https" anahtarı da http:// ile başlayan bir URL'ye işaret eder; requests, HTTPS siteleri için otomatik olarak CONNECT kullanır.
- İsteği gönderin: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Sonuç proxy IP'si olmalıdır.
- "https": "https://IP:PORT" şeklinde yazmayın. ONET proxy'leri kendilerine yönelik TLS bağlantılarını kabul etmez ve bir SSL hatası döndürür ya da bağlantıyı kapatır.
requests kütüphanesinde şifresinde özel karakterler bulunan proxy'ler nasıl kullanılır?
Birleştirmeden önce kullanıcı adını ve şifreyi URL-encode ile kodlayın: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Bu adım olmadan, şifredeki @ veya : karakterleri requests'in proxy adresini yanlış ayrıştırmasına neden olur.
Session ve yeniden deneme kullanımı
- s = requests.Session(); s.proxies.update(proxies) oluşturun. s üzerinden yapılan tüm istekler proxy'yi paylaşır ve bağlantıları canlı tutar; bu da tekrar tekrar requests.get çağırmaktan daha hızlıdır.
- Geçici hatalarda otomatik olarak yeniden denemek için Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) içeren bir HTTPAdapter bağlayın.
- Her zaman bir zaman aşımı belirleyin. Zaman aşımı olmadan, yanıt vermeyen bir bağlantı programınızı süresiz olarak askıda bırakabilir.
- s.trust_env = False olarak ayarlanmadığı sürece HTTPS_PROXY ortam değişkeni de requests tarafından okunur.
httpx ile
httpx 0.26 sürümünden itibaren proxy'yi proxy parametresini kullanarak iletin: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Daha eski sürümler proxies={"all://": url} kullanır. Eşzamanlı istekler çalıştırmanız gerekiyorsa httpx asenkron yapıyı (httpx.AsyncClient) destekler.
Python requests kütüphanesinde en sık hangi proxy hatalarıyla karşılaşılır?
En sık karşılaşılan üç hata şunlardır: yanlış kullanıcı adı veya şifreden kaynaklanan 407, proxy'ye ulaşılamamasından kaynaklanan zaman aşımları ve hedef web sitesinin istek sınırlarından kaynaklanan 429.
ProxyError … 407 Proxy Authentication Required
Yanlış kullanıcı adı veya şifre ya da özel karakterler kodlanmamış.
ConnectTimeout veya ProxyError … timed out
Proxy'ye ulaşılamıyor: yanlış IP, port veya ağ engeli. curl kullanarak doğrulayın.
Hedef siteden HTTP 429
Hedef site tarafından istek sınırı uygulandı (rate-limited). IP başına düşen istek sayısını azaltın, gecikmeler ekleyin veya yükü birden fazla proxy'ye dağıtın.
Proxy'niz yok mu? Otomatik aktivasyonlu özel proxy satın alın
2.000 IP veya üzeri alımlarda 20.000₫/IP/ay'dan başlayan fiyatlarla 9 ülkede özel IPv4 proxy'ler (1 IP için 39.000₫), ayrıca Vietnam ve ABD statik ISP proxy'leri. Kullanıcı adı ve şifre ile HTTP(S) ve SOCKS5, sınırsız bant genişliği, ödeme sonrası otomatik tanımlama. Vietnam proxy'leri şu anda SOCKS5 olmadan yalnızca HTTP(S) desteklemektedir.
Hemen proxy satın al