Selenium WebDriver اور تصدیق شدہ پراکسیز: کیا کارآمد ہے
ProxyV4 انجینئرنگ ٹیم کی جانب سے · Updated:
Selenium پراکسی تصدیق (authentication) کے لیے متبادل حل درکار ہوتا ہے، کیونکہ ChromeDriver کا --proxy-server=http://ip:port فلیگ یوزر نیم اور پاس ورڈ قبول نہیں کر سکتا؛ Chrome ان لائن user:pass کو نظرانداز کر دیتا ہے اور لاگ ان ڈائیلاگ دکھاتا ہے جسے WebDriver پُر نہیں کر سکتا۔ دو قابلِ اعتماد حل selenium-wire (جو Python میں ProxyV4 لاگ ان سنبھالتا ہے) اور ایک چھوٹی Chrome ایکسٹینشن ہیں جو کسی بھی Selenium زبان میں onAuthRequired کا جواب دیتی ہے۔
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)- 1 IP$1.85
- 3+ IPs$1.70
- 10+ IPs$1.60
- 25+ IPs$1.50
- 50+ IPs$1.40
- 100+ IPs$1.30
- 200+ IPs$1.20
- 500+ IPs$1.10
- 1 IP$2.25
- 3+ IPs$2.10
- 10+ IPs$2.00
- 25+ IPs$1.90
- 50+ IPs$1.80
- 100+ IPs$1.70
- 200+ IPs$1.60
- 500+ IPs$1.50
طریقوں کا موازنہ
| طریقہ | اس کی تشکیل کیسے کریں | کس کے لیے موزوں ہے |
|---|---|---|
selenium-wire (Python) | seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} | Python میں تیز ترین طریقہ؛ براؤزر کھلے رہنے کے دوران بھی پراکسی تبدیل کی جا سکتی ہے |
| Auth ایکسٹینشن | ایک زپ شدہ ایکسٹینشن جس کا بیک گراؤنڈ اسکرپٹ chrome.webRequest.onAuthRequired سنبھالتا ہے | Java، C#، Python اور undetected-chromedriver سب کے لیے یکساں مفید |
| Playwright پر منتقلی | browser.newContext({ proxy: { server, username, password } }) | نئے پروجیکٹس؛ پراکسی لاگ ان پہلے سے شامل ہے، کسی ایکسٹینشن کی ضرورت نہیں |
سادہ --proxy-server کے ساتھ کیا ہوتا ہے
Chrome کمانڈ لائن سے پراکسی ایڈریس لے لیتا ہے مگر اس میں درج تمام کریڈنشلز کو نظرانداز کر دیتا ہے۔ جب پراکسی 407 جواب دیتی ہے، تو Chrome ایک نیٹیو سائن ان پرامپٹ کھولتا ہے۔ یہ پرامپٹ پیج کے DOM سے باہر ہوتا ہے، اس لیے find_element اسے نہیں دیکھ سکتا اور اسکرپٹ ٹائم آؤٹ ہونے تک انتظار کرتا رہتا ہے۔ چنانچہ ہر کام کرنے والا طریقہ کریڈنشلز کو فلیگ کے بجائے کسی اور ذریعے سے فراہم کرتا ہے۔
واضح رہے کہ selenium-wire اب باقاعدہ دیکھ بھال کے تحت نہیں ہے۔ یہ اب بھی بہت سے سیٹ اپس کے لیے کام کرتا ہے، لیکن طویل مدتی پروجیکٹس کے لیے ایکسٹینشن کا طریقہ یا Playwright زیادہ محفوظ انتخاب ہیں۔
پراکسی کے ساتھ Selenium کو موثر اور تیز رکھنا
options.page_load_strategy = 'eager'سیٹ کریں تاکہ اسکرپٹ سست تھرڈ پارٹی اسکرپٹس کا انتظار کرنے کے بجائے DOM تیار ہوتے ہی جاری رہے- Chrome 109 یا بعد کے ورژنز پر ہیڈ لیس رن کے لیے
--headless=newاستعمال کریں؛ auth ایکسٹینشن سمیت تمام ایکسٹینشنز عام ونڈو کی طرح کام کرتی ہیں - جب آپ کو صرف قیمتوں یا عنوانات جیسے ٹیکسٹ کی ضرورت ہو تو Chrome کی ترجیحات میں تصاویر کی لوڈنگ بند کر دیں
driver.quit()کوtry / finallyبلاک میں رکھیں تاکہ کریش ہونے کی صورت میں Chrome کے پروسیسز پس منظر میں باقی نہ رہ جائیں
اسکیل بڑھانے سے پہلے
ہر WebDriver سیشن ایک مکمل براؤزر ہوتا ہے، اس لیے اگر سائٹ ایڈریس کے ذریعے اکاؤنٹس کو لنک کرتی ہے تو ہر سیشن کو اس کا اپنا IP دیں۔ ایک ProxyV4 پرائیویٹ IPv4 ایک ہی کسٹمر کو کرائے پر دیا جاتا ہے اور تجدید پر اپنا ایڈریس برقرار رکھتا ہے، جس سے طویل مدتی ٹیسٹ اکاؤنٹس ایک ہی IP پر رہتے ہیں۔ نئے پراکسیز کو پہلے پراکسی چیکر سے چیک کر لیں تاکہ کوئی خراب لائن Selenium کے الجھا دینے والے ٹائم آؤٹ کے طور پر سامنے نہ آئے۔
اگر کوئی رن اب بھی سرور کے اپنے IP سے صفحات کھولتا ہے یا ٹنل ایرر پر رک جاتا ہے، تو پراکسی کام نہیں کر رہی کا Selenium سیکشن عام وجوہات کو ترتیب سے بیان کرتا ہے۔
مرحلہ وار طریقہ
- 1
selenium-wire انسٹال کریں
اپنے ورچوئل انوائرنمنٹ میں،
pip install selenium-wireچلائیں۔ - 2
پراکسی کی تفصیلات درج کریں
اپنے ProxyV4 آرڈر سے
sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}تیار کریں۔ - 3
ان آپشنز کے ساتھ Chrome شروع کریں
seleniumwireسےwebdriverامپورٹ کرتے ہوئے،driver = webdriver.Chrome(seleniumwire_options=sw_options)کے ساتھ ڈرائیور بنائیں۔ - 4
ایگزٹ IP چیک کریں
driver.get('https://proxyv4.com/api/my-ip')پر کال کریں اور تصدیق کریں کہ صفحہ پراکسی ایڈریس دکھا رہا ہے۔
اکثر پوچھے جانے والے سوالات
ChromeOptions میں --proxy-server=http://user:pass@ip:port کو نظرانداز کیوں کیا جاتا ہے؟
Chrome پہلے سے طے شدہ ڈیزائن کے تحت --proxy-server کی ویلیو سے کریڈنشلز ہٹا دیتا ہے۔ انہیں selenium-wire یا onAuthRequired ایکسٹینشن کے ذریعے فراہم کریں، یا Playwright پر منتقل ہو جائیں، جو براہِ راست یوزر نیم اور پاس ورڈ قبول کرتا ہے۔
کیا selenium-wire براؤزر دوبارہ شروع کیے بغیر پراکسی تبدیل کر سکتا ہے؟
جی ہاں۔ ایک نیا ڈکشنری تفویض کریں، driver.proxy = {'http': 'http://...', 'https': 'http://...'}، اور اگلی تمام درخواستیں نئی اپ اسٹریم پراکسی استعمال کریں گی۔
کیا auth ایکسٹینشن ہیڈ لیس Chrome میں کام کرتی ہے؟
جی ہاں، --headless=new کے ساتھ۔ پرانا --headless موڈ اس طرح ایکسٹینشنز لوڈ نہیں کرتا تھا۔
پراکسی کے ذریعے ہر صفحے پر Selenium ٹائم آؤٹ ہو جاتا ہے۔ آگے کیا کریں؟
انہیں کریڈنشلز کے ساتھ cURL استعمال کرتے ہوئے IP اینڈ پوائنٹ لوڈ کریں۔ اگر cURL بھی ناکام ہو جائے تو لائن یا پورٹ میں مسئلہ ہے؛ proxy timeout guide میں جانچنے کے لیے تمام نکات درج ہیں۔
ذرائع
Selenium سیشنز کے لیے مستحکم IPs
7 ممالک میں پرائیویٹ IPv4 اور US اور Vietnam میں اسٹیٹک ISP، یوزر اور پاس ورڈ کے ساتھ، لامحدود ٹریفک اور فی IP ایک صارف۔
US کی لائیو قیمتیں دیکھیں