ProxyV4

Selenium WebDriver och autentiserade proxyservrar: vad som fungerar

· Updated:

Selenium proxyautentisering kräver en nödlösning eftersom ChromeDrivers flagga --proxy-server=http://ip:port inte kan hantera användarnamn och lösenord; Chrome ignorerar inline user:pass och visar en inloggningsruta som WebDriver inte kan fylla i. De två pålitliga lösningarna är selenium-wire, som hanterar inloggningen till ProxyV4 i Python, och ett litet Chrome-tillägg som svarar på onAuthRequired i valfritt Selenium-språk.

Selenium · HTTP
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)
Privat IPv4 (datacenter)
🇺🇸 USA
I lager
Från
1,10 US$ / IP / månad
Mängdrabatter
  • 1 IP1,85 US$
  • 3+ IP:n1,70 US$
  • 10+ IP:n1,60 US$
  • 25+ IP:n1,50 US$
  • 50+ IP:n1,40 US$
  • 100+ IP:n1,30 US$
  • 200+ IP:n1,20 US$
  • 500+ IP:n1,10 US$
Köp USA
Statisk residential ISP
🇺🇸 USA
I lager
Från
1,50 US$ / IP / månad
Mängdrabatter
  • 1 IP2,25 US$
  • 3+ IP:n2,10 US$
  • 10+ IP:n2,00 US$
  • 25+ IP:n1,90 US$
  • 50+ IP:n1,80 US$
  • 100+ IP:n1,70 US$
  • 200+ IP:n1,60 US$
  • 500+ IP:n1,50 US$
Köp USA

Jämförelse av alternativ

MetodHur du konfigurerar denPassar bäst för
selenium-wire (Python)seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}Snabbaste vägen i Python; proxyn kan bytas medan webbläsaren är öppen
AutentiseringstilläggEtt zippat tillägg vars bakgrundsskript hanterar chrome.webRequest.onAuthRequiredLika bra för Java, C#, Python och undetected-chromedriver
Byt till Playwrightbrowser.newContext({ proxy: { server, username, password } })Nya projekt; proxyinloggning är inbyggd, inget tillägg behövs

Vad som händer med enbart --proxy-server

Chrome hämtar proxyadressen från kommandoraden men ignorerar alla inloggningsuppgifter som angetts i den. När proxyn svarar med 407 öppnar Chrome en inbyggd inloggningsruta. Den rutan ligger utanför sidans DOM, så find_element kan inte se den och skriptet väntar tills det gör en timeout. Alla fungerande metoder skickar därför inloggningsuppgifterna på något annat sätt än via flaggan.

Observera att selenium-wire inte längre underhålls aktivt. Det fungerar fortfarande för många konfigurationer, men för långsiktiga projekt är tilläggsmetoden eller Playwright ett säkrare kort.

Håll Selenium-körningar via proxy effektiva

  • Sätt options.page_load_strategy = 'eager' så att skriptet fortsätter så fort DOM är redo istället för att vänta på långsamma tredjepartsskript
  • För headless-körningar i Chrome 109 eller senare, använd --headless=new; tillägg, inklusive autentiseringstillägget, fungerar då precis som i ett vanligt fönster
  • Stäng av bildinläsning i Chromes inställningar när du bara behöver text såsom priser eller titlar
  • Placera driver.quit() i ett try / finally-block så att en krasch inte lämnar kvar Chrome-processer i bakgrunden

Innan du skalar upp

Varje WebDriver-session är en fullständig webbläsare, så ge varje session en egen IP-adress om webbplatsen kopplar samman konton via adress. En privat IPv4 från ProxyV4 hyrs ut till en enskild kund och behåller sin adress vid förnyelse, vilket håller långvariga testkonton på samma IP-adress. Kör nya proxyservrar genom proxytestaren först så att en dålig anslutning inte visar sig som en förvirrande Selenium-timeout.

Om en körning ändå öppnar sidor från serverns egen IP-adress eller stannar vid ett tunnelfel, listar Selenium-avsnittet i proxy fungerar inte de vanligaste orsakerna i tur och ordning.

Steg för steg

  1. 1

    Installera selenium-wire

    Kör pip install selenium-wire i din virtuella miljö.

  2. 2

    Definiera proxyn

    Skapa sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} utifrån din ProxyV4-beställning.

  3. 3

    Starta Chrome med alternativen

    Initiera drivern med driver = webdriver.Chrome(seleniumwire_options=sw_options) och importera webdriver från seleniumwire.

  4. 4

    Kontrollera utgående IP

    Anropa driver.get('https://proxyv4.com/api/my-ip') och bekräfta att sidan visar proxyadressen.

Vanliga frågor

Varför ignoreras --proxy-server=http://user:pass@ip:port i ChromeOptions?

Chrome tar avsiktligt bort inloggningsuppgifter från värdet i --proxy-server. Ange dem via selenium-wire, ett onAuthRequired-tillägg, eller byt till Playwright, som stödjer användarnamn och lösenord direkt.

Kan selenium-wire byta proxy utan att webbläsaren startas om?

Ja. Tilldela en ny dict, driver.proxy = {'http': 'http://...', 'https': 'http://...'}, så använder efterföljande förfrågningar den nya uppströmsproxyn.

Fungerar autentiseringstillägget i headless Chrome?

Ja, med --headless=new. Det gamla --headless-läget laddade inte tillägg på samma sätt.

Selenium får timeout på varje sida via proxyn. Vad gör jag nu?

Läs in IP-slutpunkten med cURL och samma inloggningsuppgifter. Om även cURL misslyckas ligger problemet i anslutningen eller porten; vår guide för proxy-timeout listar vad du bör kontrollera.

Källor

Stabila IP-adresser för Selenium-sessioner

Privat IPv4 i 7 länder och statisk ISP i USA och Vietnam, med användarnamn och lösenord, obegränsad trafik och en kund per IP.

Se aktuella priser för USA

Related articles

Proxies per plattform
Proxies för web scraping: en fast IP-pool med obegränsad trafik
Web scraping-proxies för Python, Scrapy, Playwright och Selenium: en pool av privata IPv4- och statiska ISP-adresser, obegränsad bandbredd, fast pris per IP.
Proxykonfiguration
Playwright-proxyautentisering, en statisk IP per kontext
Ge varje Playwright-kontext en egen autentiserad HTTP(S)-proxy i Node.js eller Python, matcha tidszon och språk mot IP-adressen och bekräfta utgångsadressen.
Proxykonfiguration
Python requests via en autentiserad proxy, steg för steg
Skicka Python-requests via en autentiserad HTTP(S)-proxy: skapa proxies-dicten, koppla till en Session, koda udda lösenord, rotera listan och kontrollera IP:n.
Proxykonfiguration
Puppeteer med en autentiserad proxy: startflagga plus inloggning
Proxyautentisering i Puppeteer med fungerande kod: --proxy-server för adressen, page.authenticate() för inloggningen, plus SOCKS5, kontexter och felsökning.
Proxies per plattform
Proxies för SEO-rank tracking: se sökresultaten som lokala användare ser
SEO-proxies med privat IPv4 i USA, Storbritannien, Vietnam, Japan och fyra marknader till, så rankningar, local packs och annonser matchar vad lokala ser.
Proxies per plattform
Amazon-säljarproxies som ger varje konto en permanent adress
Amazon-säljarproxies för Seller Central, KDP och Merch: statisk ISP i USA eller privat IPv4 i UK/Japan per konto, exklusivt för dig och behålls vid förnyelse.
IPV4 · united states
Privat IPv4-proxypool i USA för webbskrapning, rankspårning och annonskontroller
Köp privata USA-IPv4-proxyer: statiska amerikanska datacenter-IP, en kund per IP, obegränsad bandbredd. För scraping, SERP-spårning och annonskontroll i USA.
ISP · united states
Statisk ISP-proxy i USA: En hemregistrerad IP som aldrig ändras
Statiska ISP-proxies i USA registrerade hos vanliga internetleverantörer. En fast amerikansk IP per konto för Amazon-säljare, annonskonton och Instagram.