Playwright (Node.js, Python)
- ব্রাউজার চালু করার সময়: chromium.launch({ proxy: { server: "http://IP:PORT", username: "user", password: "pass" } })।
- প্রতি কনটেক্সটে একটি প্রক্সি: browser.newContext({ proxy: { server, username, password } })। একটি একক ব্রাউজার ইনস্ট্যান্স একাধিক কনটেক্সট চালাতে পারে, প্রতিটির নিজস্ব IP থাকে, যা একাধিক ব্রাউজার চালু করার চেয়ে অনেক কম ওভারহেড ব্যবহার করে।
- Python একটি ডিকশনারির সাথে একই কাঠামো ব্যবহার করে: p.chromium.launch(proxy={"server": "http://IP:PORT", "username": "user", "password": "pass"})।
- Playwright-এ Firefox এবং WebKit হুবহু একই প্রক্সি কনফিগারেশন গ্রহণ করে।
Puppeteer
- কমান্ড-লাইন ফ্ল্যাগসহ ব্রাউজারটি চালু করুন: puppeteer.launch({ args: ["--proxy-server=http://IP:PORT"] })।
- প্রতিটি পেজের জন্য, page.goto-র পূর্বে await page.authenticate({ username: "user", password: "pass" }) কল করুন।
- যদি একটি একক ব্রাউজারে একাধিক প্রক্সির প্রয়োজন হয়, তবে আধুনিক Puppeteer সংস্করণগুলোতে browser.createBrowserContext({ proxyServer: "http://IP:PORT" }) ব্যবহার করুন, সাথে প্রতিটি পেজে page.authenticate কল করুন।
- https://api.ipify.org-এ গিয়ে এবং রেসপন্স বডি পড়ে কানেক্টিভিটি যাচাই করুন।
Selenium কি ব্যবহারকারীর নাম ও পাসওয়ার্ডযুক্ত প্রক্সি ব্যবহার করতে পারে?
হ্যাঁ, তবে সরাসরি নয়। ChromeDriver-এ প্রক্সি ইউজারনেম এবং পাসওয়ার্ডের জন্য কোনো প্যারামিটার নেই, আর Chrome-এর প্রক্সি অথেনটিকেশন ডায়ালগ সাধারণ Selenium দিয়ে নিয়ন্ত্রণ করা যায় না। প্রচলিত সমাধানগুলোর মধ্যে রয়েছে: selenium-wire লাইব্রেরি (Python) ব্যবহার করা যা http://user:pass@IP:PORT ফরম্যাটে প্রক্সি গ্রহণ করে; অথেনটিকেশন ইভেন্ট পরিচালনার জন্য একটি ছোট Chrome এক্সটেনশন তৈরি করে শুরুতে লোড করা; অথবা একটি Firefox প্রোফাইল ব্যবহার করা যেখানে প্রক্সি ক্রেডেনশিয়াল সংরক্ষিত থাকে। নতুন প্রজেক্টের ক্ষেত্রে Playwright বিষয়টিকে অনেক সহজ করে দেয়।
দীর্ঘমেয়াদে প্রক্সির মাধ্যমে Playwright এবং Puppeteer চালানোর সময় কী মনে রাখা উচিত?
টাইমআউট সেট করুন ও নেটওয়ার্ক এররে পুনরায় চেষ্টা করুন, কাজ শেষে পেজ ও কনটেক্সট বন্ধ করুন এবং 429 এরর এড়াতে IP প্রতি কনকারেন্ট সেশন সীমিত রাখুন।
- যৌক্তিক নেভিগেশন টাইমআউট (30–60 সেকেন্ড) সেট করুন এবং ক্ষণস্থায়ী নেটওয়ার্ক ত্রুটির জন্য রিট্রাই লজিক প্রয়োগ করুন।
- আইডল কানেকশন লিক হওয়া এড়াতে কাজ শেষ হওয়ার সাথে সাথে পেজ এবং কনটেক্সট বন্ধ করুন।
- একটি একক IP দিয়ে চলা কনকারেন্ট সেশন সীমিত করুন; একটি ঠিকানা থেকে রিকোয়েস্টের পরিমাণ খুব বেশি হলে টার্গেট সার্ভিস 429 ফেরত দিতে পারে।
- প্রক্সি দেশের সাথে কনটেক্সটের টাইম জোন এবং লোকেল মিলিয়ে নিন (Playwright-এ timezoneId, locale)।
প্রক্সি প্রয়োজন? স্বয়ংক্রিয় অ্যাক্টিভেশনসহ ডেডিকেটেড প্রক্সি কিনুন
9টি দেশে ডেডিকেটেড IPv4 প্রক্সি 20.000₫/IP/মাস থেকে শুরু, যখন 2.000টি IP থেকে কেনা হয় (1টি IP-র জন্য 39.000₫) এবং Vietnam ও US-এ স্ট্যাটিক ISP প্রক্সি। ইউজারনেম ও পাসওয়ার্ডসহ HTTP(S) এবং SOCKS5, আনলিমিটেড ব্যান্ডউইথ, পেমেন্টের পর স্বয়ংক্রিয়ভাবে সরবরাহ করা হয়। মনে রাখবেন, Vietnam প্রক্সি বর্তমানে HTTP(S) প্রোটোকল ব্যবহার করে এবং এখনও SOCKS5 সমর্থন করে না।
এখনই প্রক্সি কিনুন