Колдонмо · Python

Python requests жана httpx менен проксилерди колдонуу

requests — Python'догу эң популярдуу HTTP китепканасы жана аутентификациясы бар проксилерди ичинен колдойт. Эң көп кездешкен каталар — proxies сөздүгүндө https ачкычын туура эмес көрсөтүү жана сырсөздөгү атайын белгилерди коддобой калтыруу. Бул колдонмо туура орнотууну, анын ичинде узакка иштеген скрипттер үчүн күтүү убактысын жана каталарды иштетүүнү камтыйт.

Автор: Bùi Toàn · Жаңыртылды: 19/11/2026

Негизги конфигурация

  • ip:port:user:pass сабын URL форматына келтириңиз: proxy_url = "http://user:pass@IP:PORT".
  • Эки ачкычты тең көрсөтүңүз: proxies = {"http": proxy_url, "https": proxy_url}. "https" ачкычы дагы деле http:// менен башталган URL'ди көрсөтөт, анткени ONET проксилери HTTP прокси болуп саналат; requests HTTPS сайттары үчүн автоматтык түрдө CONNECT колдонот.
  • Сурамды жөнөтүңүз: r = requests.get("https://api.ipify.org", proxies=proxies, timeout=(10, 30)); print(r.text). Натыйжа прокси IP болушу керек.
  • "https": "https://IP:PORT" деп жазбаңыз. ONET проксилери өздөрүнө TLS туташууларын кабыл албайт жана SSL катасын чыгарат же туташууну жаап салат.

requests ичинде сырсөзүндө атайын белгилери бар проксилерди кантип колдонуу керек?

Чогултуудан мурун колдонуучунун атын жана сырсөздү URL-коддоого өткөрүңүз: from urllib.parse import quote; proxy_url = f"http://{quote(user, safe='')}:{quote(pw, safe='')}@{ip}:{port}". Бул кадамсыз сырсөздөгү @ же : белгилери requests тарабынан прокси дарегинин туура эмес талданышына алып келет.

Session жана кайталап көрүүнү колдонуу

  • s = requests.Session(); s.proxies.update(proxies) түзүңүз. s аркылуу жасалган бардык сурамдар проксини бөлүшөт жана туташууларды сактап турат, бул requests.get кайра-кайра чакырганга караганда ылдамыраак.
  • Убактылуу каталар пайда болгондо автоматтык түрдө кайталап көрүү үчүн Retry(total=3, backoff_factor=1, status_forcelist=[429, 502, 503]) менен HTTPAdapter орнотуңуз.
  • Дайыма күтүү убактысын белгилеңиз. Күтүү убактысы жок болсо, илинип калган туташуу программаңызды белгисиз мөөнөткө токтотуп коюшу мүмкүн.
  • Эгер сиз s.trust_env = False деп орнотпосоңуз, requests ошондой эле HTTPS_PROXY чөйрө өзгөрмөсүн да окуйт.

httpx менен

httpx 0.26 баштап, проксини proxy параметри аркылуу өткөрүңүз: httpx.Client(proxy="http://user:pass@IP:PORT", timeout=30). Эски версиялар proxies={"all://": url} колдонот. Эгер сиз параллелдүү сурамдарды аткарышыңыз керек болсо, httpx асинхрондуулукту (httpx.AsyncClient) колдойт.

Python requests көбүнчө кандай прокси каталарына туш болот?

Көп кездешкен үч ката: туура эмес колдонуучу аты же сырсөздөн улам келип чыккан 407, проксиге жете албай калгандагы таймауттар жана максаттуу веб-сайттын суроо-талаптар чегинен улам 429 катасы.

ProxyError … 407 Proxy Authentication Required

Колдонуучунун аты же сырсөз туура эмес, же атайын белгилер коддолгон эмес.

ConnectTimeout же ProxyError … timed out

Проксиге туташуу мүмкүн эмес: туура эмес IP, порт же тармактын бөгөттөлүшү. curl аркылуу текшериңиз.

Максаттуу сайттан HTTP 429

Максаттуу сайт тарабынан сурамдардын саны чектелди. Бир IP'ге туура келген сурамдарды азайтыңыз, тыныгууларды кошуңуз же жүктөмдү бир нече проксиге бөлүштүрүңүз.

Проксиңиз жокпу? Автоматтык түрдө иштетилүүчү арналган проксилерди сатып алыңыз

9 өлкө боюнча арналган IPv4 проксилер 2.000 же андан көп IP сатып алууда 20.000₫/IP/ай баштап (1 IP үчүн 39.000₫), ошондой эле Вьетнам жана US статикалык ISP проксилери. Колдонуучунун аты жана сырсөзү менен HTTP(S) жана SOCKS5, чексиз трафик, төлөмдөн кийин автоматтык түрдө берилет. Вьетнам проксилери учурда SOCKS5 жок, HTTP(S) гана колдойт.

Проксилерди азыр сатып алуу

Көп берилүүчү суроолор

ONET проксилеринде жип (thread) же берилиштер чектөөлөрү барбы?+

Чексиз трафик. Максаттуу сайтка жөнөтө турган сурамдардын саны ошол сайт тарабынан чектелет; андан ашып кетсе 429 катасы чыгат.

Мен aiohttp колдоно аламбы?+

Ооба. Ар бир сурам менен бирге proxy="http://IP:PORT" жана proxy_auth=aiohttp.BasicAuth(user, pass) өткөрүңүз.