Selenium WebDriver et proxys authentifiés : ce qui fonctionne
Par l'équipe d'ingénierie de ProxyV4 · Updated:
L'authentification proxy dans Selenium nécessite une solution de contournement, car l'option --proxy-server=http://ip:port de ChromeDriver ne peut pas transmettre de nom d'utilisateur ni de mot de passe ; Chrome ignore le user:pass intégré et affiche une invite de connexion que WebDriver ne peut pas remplir. Les deux solutions fiables sont selenium-wire, qui gère l'authentification ProxyV4 en Python, et une petite extension Chrome qui répond à onAuthRequired dans n'importe quel langage Selenium.
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)- 1 IP1,85 $US
- 3+ IP1,70 $US
- 10+ IP1,60 $US
- 25+ IP1,50 $US
- 50+ IP1,40 $US
- 100+ IP1,30 $US
- 200+ IP1,20 $US
- 500+ IP1,10 $US
- 1 IP2,25 $US
- 3+ IP2,10 $US
- 10+ IP2,00 $US
- 25+ IP1,90 $US
- 50+ IP1,80 $US
- 100+ IP1,70 $US
- 200+ IP1,60 $US
- 500+ IP1,50 $US
Comparatif des options
| Méthode | Configuration | Idéal pour |
|---|---|---|
selenium-wire (Python) | seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} | La méthode la plus rapide en Python ; le proxy peut être changé sans fermer le navigateur |
| Extension d'authentification | Une extension zippée dont le script d'arrière-plan gère chrome.webRequest.onAuthRequired | Convient aussi bien à Java, C#, Python qu'à undetected-chromedriver |
| Passer à Playwright | browser.newContext({ proxy: { server, username, password } }) | Nouveaux projets ; l'authentification proxy est intégrée, sans extension |
Ce qui se passe avec un simple --proxy-server
Chrome récupère l'adresse du proxy depuis la ligne de commande mais ignore les identifiants qui y sont intégrés. Lorsque le proxy répond 407, Chrome ouvre une fenêtre d'authentification native. Cette invite se trouvant hors du DOM de la page, find_element ne peut pas la détecter et le script attend jusqu'à l'expiration du délai. Toutes les méthodes fonctionnelles fournissent donc les identifiants en dehors de cet argument.
Notez que selenium-wire n'est plus maintenu activement. Il fonctionne encore dans de nombreuses configurations, mais pour les projets pérennes, l'utilisation d'une extension ou de Playwright reste le choix le plus sûr.
Optimiser l'exécution de Selenium avec proxy
- Définissez
options.page_load_strategy = 'eager'pour que le script continue dès que le DOM est prêt, sans attendre les scripts tiers lents - Pour les exécutions headless sous Chrome 109 ou supérieur, utilisez
--headless=new; les extensions, y compris celle d'authentification, fonctionnent comme dans une fenêtre standard - Désactivez le chargement des images dans les préférences de Chrome si vous avez uniquement besoin de texte comme des prix ou des titres
- Placez
driver.quit()dans un bloctry / finallypour qu'un plantage ne laisse pas de processus Chrome orphelins
Avant de passer à l'échelle
Chaque session WebDriver étant un navigateur complet, attribuez à chaque session sa propre IP si le site associe les comptes par adresse. Une IPv4 privée ProxyV4 est louée à un seul client et conserve son adresse lors du renouvellement, ce qui permet de conserver les comptes de test longue durée sur la même IP. Testez d'abord vos nouveaux proxys avec le vérificateur de proxy afin qu'une ligne défaillante ne se traduise pas par un timeout Selenium déroutant.
Si une exécution continue d'ouvrir des pages depuis l'IP propre du serveur ou s'interrompt sur une erreur de tunnel, la section Selenium de proxy ne fonctionne pas liste les causes habituelles dans l'ordre.
Étape par étape
- 1
Installer selenium-wire
Dans votre environnement virtuel, exécutez
pip install selenium-wire. - 2
Configurer le proxy
Créez
sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}à partir de votre commande ProxyV4. - 3
Lancer Chrome avec ces options
Créez le driver avec
driver = webdriver.Chrome(seleniumwire_options=sw_options)en importantwebdriverdepuisseleniumwire. - 4
Vérifier l'IP de sortie
Appelez
driver.get('https://proxyv4.com/api/my-ip')et confirmez que la page affiche bien l'adresse du proxy.
Foire aux questions
Pourquoi --proxy-server=http://user:pass@ip:port est-il ignoré dans ChromeOptions ?
Chrome supprime par conception les identifiants de la valeur --proxy-server. Transmettez-les via selenium-wire, une extension onAuthRequired, ou passez à Playwright, qui accepte directement un nom d'utilisateur et un mot de passe.
selenium-wire peut-il changer de proxy sans redémarrer le navigateur ?
Oui. Attribuez un nouveau dictionnaire, driver.proxy = {'http': 'http://...', 'https': 'http://...'}, et les requêtes suivantes utiliseront le nouveau proxy en amont.
L'extension d'authentification fonctionne-t-elle avec Chrome en mode headless ?
Oui, avec --headless=new. L'ancien mode --headless ne chargeait pas les extensions de la même manière.
Selenium expire sur chaque page via le proxy. Que faire ?
Chargez le endpoint IP avec curl en utilisant les mêmes identifiants. Si curl échoue aussi, le problème vient de la ligne ou du port ; le guide des timeouts de proxy liste les points à vérifier.
Sources
IP stables pour vos sessions Selenium
IPv4 privées dans 7 pays et ISP statiques aux États-Unis et au Vietnam, avec identifiant et mot de passe, trafic illimité et un seul client par IP.
Voir les tarifs US en direct