Гарын авлага · Python

Python requests болон httpx-д прокси ашиглах

requests нь Python-ий хамгийн алдартай HTTP сан бөгөөд нэвтрэх эрх шаардсан проксиг суурилуулсан хэлбэрээр дэмждэг. Хамгийн түгээмэл алдаанууд нь proxies толь бичигт https түлхүүрийг буруу зааж өгөх болон нууц үг дэх тусгай тэмдэгтүүдийг кодчилж хувиргахгүй орхих явдал юм. Энэхүү гарын авлага нь удаан хугацаанд ажиллах скриптүүдэд зориулсан зөв тохиргоо, түүний дотор timeout болон алдаа боловсруулалтыг багтаасан болно.

Зохиогч: Bùi Toàn · Шинэчлэгдсэн: 19/11/2026

Үндсэн тохиргоо

  • ip:port:user:pass мөрийг URL хэлбэрт хөрвүүлэх: proxy_url = "http://user:pass@IP:PORT".
  • Хоёр түлхүүрийг хоёуланг нь тодорхойлно: proxies = {"http": proxy_url, "https": proxy_url}. ONET прокси нь HTTP прокси тул "https" түлхүүр нь мөн http://-ээр эхэлсэн URL руу заана; requests нь HTTPS сайтуудад автоматаар CONNECT аргыг ашигладаг.
  • Хүсэлтийг илгээх: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Үр дүн нь прокси IP байх ёстой.
  • "https": "https://IP:PORT" гэж бичиж болохгүй. ONET прокси нь өөр рүүгээ чиглэсэн TLS холболтыг хүлээн авдаггүй бөгөөд SSL алдаа буцаах эсвэл холболтыг салгах болно.

requests дээр нууц үгэндээ тусгай тэмдэгт агуулсан проксиг хэрхэн ашиглах вэ?

URL-ийг угсрахаас өмнө хэрэглэгчийн нэр болон нууц үгийг URL-кодчилолд оруулна: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Энэ алхамгүйгээр нууц үг дэх @ эсвэл : тэмдэгтүүд нь requests санг прокси хаягийг буруу задлан уншихад хүргэнэ.

Session болон дахин оролдлогуудыг ашиглах

  • s = requests.Session(); s.proxies.update(proxies) гэж үүсгэнэ. s-ээр дамжуулан хийсэн бүх хүсэлтүүд нь проксиг хамтран ашиглаж холболтоо хадгалдаг тул requests.get-ийг дахин дахин дуудсанаас илүү хурдан байдаг.
  • Түр зуурын алдаануудын үед автоматаар дахин оролдохын тулд Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) бүхий HTTPAdapter холбож тохируулна.
  • Үргэлж timeout зааж өгөх хэрэгтэй. Хэрэв timeout байхгүй бол гацсан холболт нь таны программыг тодорхойгүй хугацаагаар гацааж болзошгүй.
  • Хэрэв та s.trust_env = False гэж тохируулаагүй бол HTTPS_PROXY орчны хувьсагчийг мөн requests уншдаг.

httpx-тэй ашиглах

httpx 0.26 хувилбараас эхлэн проксиг proxy параметрээр дамжуулна: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Хуучин хувилбарууд proxies={"all://": url}-ийг ашигладаг. Хэрэв та зэрэгцээ хүсэлтүүд ажиллуулах шаардлагатай бол httpx нь асинхрон горимыг (httpx.AsyncClient) дэмждэг.

Python requests дээр ямар проксигийн алдаанууд түгээмэл тохиолддог вэ?

Хамгийн түгээмэл гурван алдаа нь буруу хэрэглэгчийн нэр эсвэл нууц үгээс үүдэлтэй 407, проксид холбогдож чадаагүйн улмаас гарах timeout, болон зорилтот вэбсайтын хүсэлтийн хязгаарлалтаас үүдэлтэй 429 алдаа юм.

ProxyError … 407 Proxy Authentication Required

Хэрэглэгчийн нэр эсвэл нууц үг буруу байна, эсвэл тусгай тэмдэгтүүдийг кодчлоогүй байна.

ConnectTimeout эсвэл ProxyError … timed out

Проксид холбогдож чадахгүй байна: буруу IP, порт эсвэл сүлжээний хориг. curl ашиглан шалгана уу.

Зорилтот хуудаснаас ирсэн HTTP 429

Зорилтот сайт хүсэлтийн хязгаар (rate-limit) тогтоосон байна. Нэг IP-д ногдох хүсэлтийг цөөлөх, хугацааны завсарлага нэмэх эсвэл ачааллыг олон проксид хуваарилах хэрэгтэй.

Прокси байхгүй байна уу? Автоматаар идэвхжих зориулалтын прокси худалдаж аваарай

9 улс дахь зориулалтын IPv4 прокси 2.000 IP буюу түүнээс дээш тоогоор авахад сард 20.000₫/IP-ээс эхэлнэ (1 IP нь 39.000₫), дээрээс нь Вьетнам болон US статик ISP прокси. Хэрэглэгчийн нэр, нууц үг бүхий HTTP(S) болон SOCKS5, хязгааргүй дата хэрэглээ, төлбөр төлөгдсөний дараа автоматаар олгогдоно. Вьетнам прокси одоогоор SOCKS5-гүй, зөвхөн HTTP(S) дэмждэг.

Прокси шууд худалдан авах

Түгээмэл асуултууд

ONET прокси нь урсгал эсвэл датаны хязгаартай юу?+

Хязгааргүй дата хэрэглээтэй. Зорилтот сайт руу илгээж болох хүсэлтийн тоог тухайн сайт өөрөө хязгаарладаг бөгөөд уг хязгаарыг хэтрүүлбэл 429 алдаа заана.

Би aiohttp ашиглаж болох уу?+

Болно. Хүсэлт бүртээ proxy="http://IP:PORT" болон proxy_auth=aiohttp.BasicAuth(user, pass)-ийг дамжуулна.