Playwright (Node.js, Python)
- ብሮውዘር ሲያስጀምሩ፦ chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } })።
- አንድ proxy በcontext፦ browser.newContext({ proxy: { server, username, password } })። አንድ የብሮውዘር ኢንስታንስ በርካታ contextዎችን ሊያሄድ ይችላል፣ እያንዳንዳቸው የራሳቸው IP ያላቸው ሲሆን በርካታ ብሮውዘሮችን ከማስጀመር አንፃር እጅግ አነስተኛ ሀብት ይወስዳሉ።
- Python ተመሳሳይ መዋቅርን ከdictionary ጋር ይጠቀማል፦ p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"})።
- Firefox እና WebKit በPlaywright ውስጥ ልክ ተመሳሳይ የproxy ውቅር ይቀበላሉ።
Puppeteer
- ብሮውዘሩን በትእዛዝ መስመር ባንዲራ ያስጀምሩ፦ puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] })።
- ለእያንዳንዱ ገጽ፣ ከpage.goto በፊት await page.authenticate({ username: "user", password: "pass" }) ይጥሩ።
- በአንድ ብሮውዘር ውስጥ በርካታ proxyዎች ካስፈለጉዎት፣ በዘመናዊ የPuppeteer ስሪቶች ውስጥ browser.createBrowserContext({ proxyServer: "http://IP:PORT" })ን በእያንዳንዱ ገጽ ላይ ከpage.authenticate ጋር ይጠቀሙ።
- ግንኙነቱን ወደ https://api.ipify.org በመሄድ እና የምላሽ ይዘቱን በማንበብ ያረጋግጡ።
Selenium የተጠቃሚ ስም እና የይለፍ ቃል ያላቸውን proxies መጠቀም ይችላል?
አዎ፣ ግን በቀጥታ አይደለም። ChromeDriver ለproxy የተጠቃሚ ስም እና የይለፍ ቃል መለኪያ የለውም፣ እንዲሁም የChrome proxy የማረጋገጫ ሳጥን በመደበኛ Selenium ሊቆጣጠር አይችልም። የተለመዱ መፍትሄዎች የሚከተሉትን ያካትታሉ፦ proxies በhttp://user:pass@IP:PORT ቅርጸት የሚቀበለውን የselenium-wire ላይብረሪ (Python) መጠቀም፤ የማረጋገጫ ሂደቶችን የሚቆጣጠር አነስተኛ የChrome extension መፍጠርና በሚነሳበት ጊዜ መጫን፤ ወይም የproxy ምስክርነቶች በተቀመጡበት መገለጫ Firefoxን መጠቀም። ለአዳዲስ ፕሮጀክቶች፣ Playwright ይህንን እጅግ በጣም ቀላል ያደርገዋል።
Playwright እና Puppeteerን በproxies በኩል ለረጅም ጊዜ ሲያስኬዱ ምን ማስታወስ ይኖርብዎታል?
የጊዜ ገደቦችን (timeouts) ያስቀምጡ እና የአውታረ መረብ ስህተቶች ሲያጋጥሙ እንደገና ይሞክሩ፣ ስራ ሲጠናቀቅ ገጾችንና contexts ይዝጉ፣ እንዲሁም የ429 ስህተቶችን ለማስወገድ በአንድ IP የሚደረጉ በአንድ ጊዜ ክፍለ-ጊዜዎችን (concurrent sessions) ይገድቡ።
- ተገቢ የአሰሳ ማብቂያ ጊዜዎችን (ከ30–60 ሰከንዶች) ያዘጋጁ እና ለጊዜያዊ የአውታረ መረብ ችግሮች የመልሶ መሞከር አመክንዮ ይተግብሩ።
- ስራ ሲጠናቀቅ ስራ ፈት ግንኙነቶች እንዳይባክኑ ገጾችን እና contextዎችን በፍጥነት ይዝጉ።
- በአንድ IP የሚሰሩ በአንድ ጊዜ የሚከናወኑ ክፍለ-ጊዜዎችን ይገድቡ፤ ከአንድ አድራሻ የሚመጣው የጥያቄ መጠን በጣም ከፍተኛ ከሆነ ዒላማ አገልግሎቶች 429 ሊመልሱ ይችላሉ።
- የcontextቱን የሰዓት ሰቅ እና ቋንቋ/አካባቢ ከproxyው አገር ጋር ያስማሙ (በPlaywright ውስጥ timezoneId፣ locale)።
Proxy ይፈልጋሉ? በራስ-ሰር አግብርታ የሚሰሩ dedicated proxyዎችን ይግዙ
Dedicated IPv4 proxyዎች በ9 አገሮች ከ20.000₫/IP/በወር ጀምሮ ከ2.000 IPs በላይ ሲገዙ (ለ1 IP 39.000₫)፣ እንዲሁም static ISP proxyዎች በVietnam እና US። HTTP(S) እና SOCKS5 ከተጠቃሚ ስም እና የይለፍ ቃል ጋር፣ ገደብ የለሽ ባንድዊድዝ፣ ከክፍያ በኋላ ወዲያውኑ የሚዘጋጁ። የVietnam proxyዎች በአሁኑ ጊዜ HTTP(S) ፕሮቶኮልን ብቻ እንደሚጠቀሙና SOCKS5 እስካሁን እንደማይደግፉ ልብ ይበሉ።
Proxy አሁኑኑ ይግዙ