Playwright (Node.js, Python)
- Пры запуску браўзера: chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } }).
- Адзін проксі на кантэкст: browser.newContext({ proxy: { server, username, password } }). Адзін асобнік браўзера можа запускаць некалькі кантэкстаў, кожны са сваім IP, што спажывае значна менш рэсурсаў, чым запуск некалькіх браўзераў.
- Python выкарыстоўвае такую ж структуру са слоўнікам: p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"}).
- Firefox і WebKit у Playwright прымаюць дакладна такую ж канфігурацыю проксі.
Puppeteer
- Запусціце браўзер са сцягам каманднага радка: puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] }).
- Для кожнай старонкі выклікайце await page.authenticate({ username: "user", password: "pass" }) перад page.goto.
- Калі вам патрэбна некалькі проксі ў межах аднаго браўзера, выкарыстоўвайце browser.createBrowserContext({ proxyServer: "http://IP:PORT" }) у сучасных версіях Puppeteer разам з page.authenticate на кожнай старонцы.
- Праверце злучэнне, перайшоўшы на https://api.ipify.org і прачытаўшы цела адказу.
Ці можа Selenium выкарыстоўваць проксі з лагінам і паролем?
Так, але не наўпрост. У ChromeDriver няма параметра для лагіна і пароля проксі, а дыялогавым акном аўтэнтыфікацыі Chrome немагчыма кіраваць праз стандартны Selenium. Распаўсюджаныя абыходныя шляхі: бібліятэка selenium-wire (Python), якая прымае проксі ў фармаце http://user:pass@IP:PORT; стварэнне невялікага пашырэння Chrome для апрацоўкі аўтэнтыфікацыі пры запуску; або выкарыстанне Firefox з профілем, дзе захаваны ўліковыя даныя проксі. У новых праектах Playwright робіць гэта значна прасцей.
Што варта ўлічваць пры доўгатэрміновай працы Playwright і Puppeteer праз проксі?
Задавайце таймаўты і паўторы пры сеткавых памылках, закрывайце старонкі і кантэксты пасля завяршэння працы, а таксама абмяжоўвайце колькасць адначасовых сесій на адзін IP, каб пазбегнуць памылак 429.
- Устанаўлівайце разумныя таймаўты навігацыі (30–60 секунд) і рэалізуйце логіку паўторных спроб пры кароткачасовых сеткавых збоях.
- Своечасова закрывайце старонкі і кантэксты пасля завяршэння працы, каб пазбегнуць уцечкі бяздзейных злучэнняў.
- Абмяжоўвайце колькасць паралельных сесій праз адзін IP; мэтавыя сэрвісы могуць вяртаць памылку 429, калі аб'ём запытаў з аднаго адраса занадта высокі.
- Узгадняйце гадзінны пояс і лакаль кантэксту з краінай проксі (timezoneId, locale у Playwright).
Патрэбны проксі? Купляйце выдзеленыя проксі з аўтаматычнай актывацыяй
Выдзеленыя IPv4-проксі ў 9 краінах ад 20.000₫/IP/месяц пры куплі ад 2.000 IP (39.000₫ за 1 IP) і статычныя ISP-проксі ў В'етнаме, ЗША. HTTP(S) і SOCKS5 з лагінам і паролем, неабмежаваны трафік, аўтаматычная выдача пасля аплаты. Звярніце ўвагу, што проксі В'етнама цяпер выкарыстоўваюць пратакол HTTP(S) і пакуль не падтрымліваюць SOCKS5.
Купіць проксі зараз