Selenium WebDriver ve kimlik doğrulamalı proxy'ler: Çalışan yöntemler
ProxyV4 Mühendislik Ekibi tarafından · Updated:
Selenium proxy kimlik doğrulaması ek bir çözüm gerektirir; çünkü ChromeDriver'ın --proxy-server=http://ip:port bayrağı kullanıcı adı ve şifre taşıyamaz. Chrome, satır içi user:pass bilgilerini yok sayar ve WebDriver'ın dolduramayacağı bir oturum açma penceresi gösterir. Güvenilir iki çözüm; Python'da ProxyV4 girişini yöneten selenium-wire ve herhangi bir Selenium dilinde onAuthRequired olayını yanıtlayan küçük bir Chrome eklentisidir.
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)- 1 IP$1,85
- 3+ IP$1,70
- 10+ IP$1,60
- 25+ IP$1,50
- 50+ IP$1,40
- 100+ IP$1,30
- 200+ IP$1,20
- 500+ IP$1,10
- 1 IP$2,25
- 3+ IP$2,10
- 10+ IP$2,00
- 25+ IP$1,90
- 50+ IP$1,80
- 100+ IP$1,70
- 200+ IP$1,60
- 500+ IP$1,50
Seçeneklerin karşılaştırması
| Yöntem | Nasıl yapılandırılır | En uygun senaryo |
|---|---|---|
selenium-wire (Python) | seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} | Python'daki en hızlı yol; tarayıcı açıkken proxy değiştirilebilir |
| Kimlik doğrulama eklentisi | Arka plan betiği chrome.webRequest.onAuthRequired olayını yöneten sıkıştırılmış bir eklenti | Java, C#, Python ve undetected-chromedriver için aynı şekilde uygundur |
| Playwright'a geçiş | browser.newContext({ proxy: { server, username, password } }) | Yeni projeler; eklenti gerektirmeden yerleşik proxy girişi sunar |
Yalın --proxy-server kullanımında ne olur
Chrome, proxy adresini komut satırından alır ancak içine yazılan kimlik bilgilerini yok sayar. Proxy 407 yanıtı verdiğinde Chrome yerel bir oturum açma istemi açar. Bu istem sayfa DOM'unun dışındadır; bu yüzden find_element onu göremez ve betik zaman aşımına uğrayana kadar bekler. Dolayısıyla çalışan her yöntem, kimlik bilgilerini bu bayrağın dışındaki bir yoldan sağlar.
selenium-wire kütüphanesinin artık aktif olarak güncellenmediğini unutmayın. Birçok kurulum için hâlâ çalışır durumdadır; ancak uzun ömürlü projelerde eklenti yaklaşımı veya Playwright daha güvenli bir tercihtir.
Proxy'li Selenium oturumlarını verimli tutma
- Betiğin yavaş üçüncü taraf betikleri beklemek yerine DOM hazır olur olmaz devam etmesi için
options.page_load_strategy = 'eager'ayarını yapın - Chrome 109 veya sonraki sürümlerde gövdesiz (headless) çalıştırmalar için
--headless=newkullanın; kimlik doğrulama eklentisi de dahil olmak üzere eklentiler normal bir penceredeki gibi davranır - Yalnızca fiyatlar veya başlıklar gibi metinlere ihtiyaç duyduğunuzda Chrome tercihlerinden resim yüklemeyi kapatın
- Olası bir çökmenin arkada Chrome süreçleri bırakmaması için
driver.quit()çağrısını birtry / finallybloğuna yerleştirin
Ölçeklendirmeden önce
Her WebDriver oturumu tam bir tarayıcıdır; bu nedenle site hesapları adrese göre ilişkilendiriyorsa her oturuma ayrı bir IP atayın. Bir ProxyV4 özel IPv4 yalnızca tek bir müşteriye kiralanır ve yenilediğinizde adresini korur; bu da uzun süreli test hesaplarının aynı IP üzerinde kalmasını sağlar. Sorunlu bir hattın kafa karıştırıcı bir Selenium zaman aşımı olarak görünmemesi için yeni proxyleri önce proxy denetleyicisinden geçirin.
Bir çalıştırma işlemi sayfaları hâlâ sunucunun kendi IP'sinden açıyorsa veya bir tünel hatasıyla duruyorsa, proxy çalışmıyor sayfasının Selenium bölümü en yaygın nedenleri sırasıyla listeler.
Adım adım
- 1
selenium-wire kurulumunu yapın
Sanal ortamınızda
pip install selenium-wirekomutunu çalıştırın. - 2
Proxy'yi tanımlayın
ProxyV4 siparişinizdeki bilgilerle
sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}yapısını oluşturun. - 3
Chrome'u bu seçeneklerle başlatın
seleniumwireüzerindenwebdriveriçe aktararakdriver = webdriver.Chrome(seleniumwire_options=sw_options)ile sürücüyü oluşturun. - 4
Çıkış IP adresini kontrol edin
driver.get('https://proxyv4.com/api/my-ip')çağrısını yapın ve sayfanın proxy adresini gösterdiğini doğrulayın.
Sıkça sorulan sorular
ChromeOptions içinde --proxy-server=http://user:pass@ip:port neden yok sayılır?
Chrome, tasarım gereği --proxy-server değerindeki kimlik bilgilerini kaldırır. Bunları selenium-wire veya bir onAuthRequired eklentisi üzerinden iletin ya da doğrudan kullanıcı adı ve şifre kabul eden Playwright aracına geçiş yapın.
selenium-wire tarayıcıyı yeniden başlatmadan proxy değiştirebilir mi?
Evet. driver.proxy = {'http': 'http://...', 'https': 'http://...'} şeklinde yeni bir sözlük atadığınızda sonraki istekler yeni yukarı akış proxy'sini kullanır.
Kimlik doğrulama eklentisi gövdesiz (headless) Chrome'da çalışır mı?
Evet, --headless=new bayrağıyla çalışır. Eski --headless modu eklentileri bu şekilde yüklemiyordu.
Selenium proxy üzerinden her sayfada zaman aşımına uğruyor. Ne yapmalıyım?
Aynı kimlik bilgileriyle IP uç noktasını curl üzerinden çağırın. curl de başarısız oluyorsa sorun hatta veya bağlantı noktasındadır; nelerin inceleneceği proxy timeout guide rehberinde listelenmiştir.
Kaynaklar
Selenium oturumları için kararlı IP'ler
7 ülkede özel IPv4 ve ABD ile Vietnam'da statik ISP; kullanıcı adı ve şifreli, sınırsız trafikli ve her IP yalnızca bir müşteriye özel.
Güncel ABD fiyatlarını inceleyin