Үндсэн тохиргоо
- ip:port:user:pass мөрийг URL хэлбэрт хөрвүүлэх: proxy_url = "http://user:pass@IP:PORT".
- Хоёр түлхүүрийг хоёуланг нь тодорхойлно: proxies = {"http": proxy_url, "https": proxy_url}. ONET прокси нь HTTP прокси тул "https" түлхүүр нь мөн http://-ээр эхэлсэн URL руу заана; requests нь HTTPS сайтуудад автоматаар CONNECT аргыг ашигладаг.
- Хүсэлтийг илгээх: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Үр дүн нь прокси IP байх ёстой.
- "https": "https://IP:PORT" гэж бичиж болохгүй. ONET прокси нь өөр рүүгээ чиглэсэн TLS холболтыг хүлээн авдаггүй бөгөөд SSL алдаа буцаах эсвэл холболтыг салгах болно.
requests дээр нууц үгэндээ тусгай тэмдэгт агуулсан проксиг хэрхэн ашиглах вэ?
URL-ийг угсрахаас өмнө хэрэглэгчийн нэр болон нууц үгийг URL-кодчилолд оруулна: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Энэ алхамгүйгээр нууц үг дэх @ эсвэл : тэмдэгтүүд нь requests санг прокси хаягийг буруу задлан уншихад хүргэнэ.
Session болон дахин оролдлогуудыг ашиглах
- s = requests.Session(); s.proxies.update(proxies) гэж үүсгэнэ. s-ээр дамжуулан хийсэн бүх хүсэлтүүд нь проксиг хамтран ашиглаж холболтоо хадгалдаг тул requests.get-ийг дахин дахин дуудсанаас илүү хурдан байдаг.
- Түр зуурын алдаануудын үед автоматаар дахин оролдохын тулд Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) бүхий HTTPAdapter холбож тохируулна.
- Үргэлж timeout зааж өгөх хэрэгтэй. Хэрэв timeout байхгүй бол гацсан холболт нь таны программыг тодорхойгүй хугацаагаар гацааж болзошгүй.
- Хэрэв та s.trust_env = False гэж тохируулаагүй бол HTTPS_PROXY орчны хувьсагчийг мөн requests уншдаг.
httpx-тэй ашиглах
httpx 0.26 хувилбараас эхлэн проксиг proxy параметрээр дамжуулна: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Хуучин хувилбарууд proxies={"all://": url}-ийг ашигладаг. Хэрэв та зэрэгцээ хүсэлтүүд ажиллуулах шаардлагатай бол httpx нь асинхрон горимыг (httpx.AsyncClient) дэмждэг.
Python requests дээр ямар проксигийн алдаанууд түгээмэл тохиолддог вэ?
Хамгийн түгээмэл гурван алдаа нь буруу хэрэглэгчийн нэр эсвэл нууц үгээс үүдэлтэй 407, проксид холбогдож чадаагүйн улмаас гарах timeout, болон зорилтот вэбсайтын хүсэлтийн хязгаарлалтаас үүдэлтэй 429 алдаа юм.
ProxyError … 407 Proxy Authentication Required
Хэрэглэгчийн нэр эсвэл нууц үг буруу байна, эсвэл тусгай тэмдэгтүүдийг кодчлоогүй байна.
ConnectTimeout эсвэл ProxyError … timed out
Проксид холбогдож чадахгүй байна: буруу IP, порт эсвэл сүлжээний хориг. curl ашиглан шалгана уу.
Зорилтот хуудаснаас ирсэн HTTP 429
Зорилтот сайт хүсэлтийн хязгаар (rate-limit) тогтоосон байна. Нэг IP-д ногдох хүсэлтийг цөөлөх, хугацааны завсарлага нэмэх эсвэл ачааллыг олон проксид хуваарилах хэрэгтэй.
Прокси байхгүй байна уу? Автоматаар идэвхжих зориулалтын прокси худалдаж аваарай
9 улс дахь зориулалтын IPv4 прокси 2.000 IP буюу түүнээс дээш тоогоор авахад сард 20.000₫/IP-ээс эхэлнэ (1 IP нь 39.000₫), дээрээс нь Вьетнам болон US статик ISP прокси. Хэрэглэгчийн нэр, нууц үг бүхий HTTP(S) болон SOCKS5, хязгааргүй дата хэрэглээ, төлбөр төлөгдсөний дараа автоматаар олгогдоно. Вьетнам прокси одоогоор SOCKS5-гүй, зөвхөн HTTP(S) дэмждэг.
Прокси шууд худалдан авах