Playwright (Node.js, Python)
- Brauzeri işə salarkən: chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } }).
- Hər kontekst üçün bir proksi: browser.newContext({ proxy: { server, username, password } }). Tək bir brauzer instansı hər biri öz IP-sinə malik birdən çox kontekst icra edə bilər ki, bu da bir neçə brauzeri ayrıca açmaqdan daha az resurs sərf edir.
- Python lüğət strukturundan istifadə edərək eyni quruluşu tətbiq edir: p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"}).
- Playwright-da Firefox və WebKit tamamilə eyni proksi konfiqurasiyasını qəbul edir.
Puppeteer
- Brauzeri əmr sətri parametri ilə işə salın: puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] }).
- Hər səhifə üçün page.goto çağırışından əvvəl await page.authenticate({ username: "user", password: "pass" }) çağırın.
- Tək bir brauzer daxilində birdən çox proksi lazımdırsa, müasir Puppeteer versiyalarında hər səhifədə page.authenticate ilə yanaşı browser.createBrowserContext({ proxyServer: "http://IP:PORT" }) metodundan istifadə edin.
- https://api.ipify.org ünvanına daxil olaraq və cavabın mətnini (body) oxuyaraq bağlantını yoxlayın.
Selenium istifadəçi adı və şifrə ilə proksi istifadə edə bilirmi?
Bəli, amma birbaşa deyil. ChromeDriver proksi istifadəçi adı və şifrəsi üçün parametrə malik deyil və Chrome-un proksi autentifikasiya pəncərəsini standart Selenium ilə idarə etmək olmur. Ən geniş yayılmış həll yolları: proksiləri http://user:pass@IP:PORT formatında qəbul edən selenium-wire kitabxanasından (Python) istifadə etmək; autentifikasiyanı idarə edən kiçik bir Chrome uzantısı yaradıb onu başlanğıcda yükləmək; yaxud proksi məlumatları yadda saxlanılmış profillə Firefox-dan istifadə etmək. Yeni layihələr üçün Playwright bu prosesi xeyli asanlaşdırır.
Playwright və Puppeteer-i proksi ilə uzun müddət işlədərkən nələrə diqqət yetirməlisiniz?
Şəbəkə xətalarında gözləmə vaxtı (timeout) təyin edin və yenidən cəhd mexanizmi qurun, iş bitdikdə səhifələri və kontekstləri bağlayın və 429 xətalarının qarşısını almaq üçün hər IP üzrə eyni vaxtda açılan seansların sayını məhdudlaşdırın.
- Ağlabatan naviqasiya vaxtı təyin edin (30–60 saniyə) və müvəqqəti şəbəkə xətaları üçün təkrar cəhd məntiqini tətbiq edin.
- Boşda qalan bağlantıların açıq qalmasının qarşısını almaq üçün əməliyyat bitdikdə səhifələri və kontekstləri vaxtında bağlayın.
- Tək bir IP üzərindən icra olunan eynivaxtlı sessiyaların sayını məhdudlaşdırın; bir ünvandan sorğu həcmi həddən artıq çox olarsa, hədəf xidmətlər 429 xətası qaytara bilər.
- Kontekstin saat qurşağını və lokalını proksi ölkəsinə uyğunlaşdırın (Playwright-da timezoneId, locale).
Proksi lazımdır? Avtomatik aktivləşən fərdi proksilər alın
9 ölkədə fərdi IPv4 proksiləri 2.000 IP-dən alışda 20.000₫/IP/ay-dan (1 IP üçün 39.000₫) və Vyetnam, ABŞ-da statik ISP proksiləri. İstifadəçi adı və şifrə ilə HTTP(S) və SOCKS5, limitsiz trafik, ödənişdən dərhal sonra avtomatik aktivləşmə. Nəzərə alın ki, Vyetnam proksiləri hazırda HTTP(S) protokolundan istifadə edir və hələlik SOCKS5 dəstəkləmir.
İndi proksi alın