Peticiones de Python mediante un proxy autenticado, paso a paso
Por el equipo de ingeniería de ProxyV4 · Updated:
Para usar un proxy en Python requests, pasa un dict proxies cuyas claves 'http' y 'https' apunten a http://user:pass@ip:port. Asigna ese dict a una requests.Session() y se reutilizará la misma conexión al proxy en cada llamada, lo cual es más rápido que abrir una nueva por petición. A continuación: el dict, la sesión, los errores más habituales y una comprobación en una línea de la IP de salida de ProxyV4.
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}- 1 IP1,85 US$
- 3+ IPs1,70 US$
- 10+ IPs1,60 US$
- 25+ IPs1,50 US$
- 50+ IPs1,40 US$
- 100+ IPs1,30 US$
- 200+ IPs1,20 US$
- 500+ IPs1,10 US$
- 1 IP1,85 US$
- 3+ IPs1,70 US$
- 10+ IPs1,60 US$
- 25+ IPs1,50 US$
- 50+ IPs1,40 US$
- 100+ IPs1,30 US$
- 200+ IPs1,20 US$
- 500+ IPs1,10 US$
El dict proxies, explicado
| Configuración | Valor | Motivo |
|---|---|---|
Clave 'http' | 'http://user:pass@ip:port' | Se usa para URLs http:// simples |
Clave 'https' | 'http://user:pass@ip:port' | Sigue siendo una URL de proxy http://: urllib3 solicita al proxy un túnel CONNECT y ejecuta TLS en su interior |
timeout | timeout=(5, 15) | 5 s para conectar y 15 s para leer; así un destino caído no bloqueará el hilo |
| Rotación | itertools.cycle(proxy_list) | Entrega tus IPs estáticas por turnos |
Por qué una Session es mejor que usar requests.get() directamente
Cada llamada a nivel superior con requests.get() crea un nuevo grupo de conexiones, por lo que la conexión TCP con el proxy y el protocolo de enlace TLS con el sitio se repiten cada vez. Una Session mantiene activas esas conexiones entre llamadas. En un script que descarga cientos de páginas a través de una misma IP, esa diferencia se nota con claridad en el tiempo total de ejecución.
Configura s.proxies.update(proxies) una sola vez y cada s.get() y s.post() pasará por el proxy. Un detalle importante: si HTTP_PROXY o HTTPS_PROXY están definidos en las variables de entorno, requests puede combinarlos con la configuración de la sesión; pasa proxies= directamente en la llamada cuando necesites tener la certeza de cuál se está usando.
Errores y cómo interpretarlos
ProxyErrorcon407 Proxy Authentication Required: el proxy es accesible, pero las credenciales en tu URL no coinciden con el pedido. Consulta la página del error 407- Las contraseñas que contienen
@,:o/rompen la URL; codifícalas primero conurllib.parse.quote(password, safe='') - Cambiar la URL del proxy a
https://suele interrumpir la conexión; manténhttp://en ambas claves salvo que el puerto de tu proxy sea específicamente un puerto TLS ConnectTimeoutapunta a la IP o al puerto, no a las credenciales; comprueba la conectividad con el comprobador de puertos
El mismo patrón en httpx y aiohttp
El formato de la URL es el mismo. En httpx, crea httpx.Client(proxy='http://user:pass@ip:port'); en aiohttp, pasa proxy= a session.get(url, proxy=...). Para rastreos más grandes con programación y reintentos, suele ser más sencillo usar Scrapy.
Paso a paso
- 1
Construye la URL del proxy
Reescribe cada línea
ip:port:user:passde ProxyV4 comohttp://user:pass@ip:port, o convierte la lista completa con el conversor de formatos de proxy. - 2
Crea el dict
Escribe
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}. - 3
Asígnalo a una Session
Crea
s = requests.Session()y llama as.proxies.update(proxies)para mantener activas las conexiones entre peticiones. - 4
Imprime la IP de salida
Ejecuta
print(s.get('https://proxyv4.com/api/my-ip', timeout=10).json()); la IP en la salida debe ser la del proxy.
Preguntas frecuentes
¿Por qué la entrada 'https' usa una URL http://?
El esquema describe cómo se comunica Python con el proxy, no con el sitio web. urllib3 se conecta al proxy mediante HTTP sin cifrar, envía CONNECT y luego realiza TLS con el sitio https:// a través de ese túnel, por lo que el tráfico de la página sigue estando cifrado.
¿Cómo distribuyo las peticiones entre 25 proxies estáticos?
Coloca las 25 URLs en una lista, crea pool = itertools.cycle(PROXIES), y para cada petición toma p = next(pool) y pasa proxies={'http': p, 'https': p}. Mantén un intervalo prudencial por IP para no saturar ninguna dirección individual.
¿El tráfico de los scripts de Python está medido?
No. Los planes de IPv4 privada e ISP estática de ProxyV4 incluyen ancho de banda ilimitado, por lo que los scripts de larga duración no tienen límite de datos.
Fuentes
Un grupo de IPs estáticas para scripts en Python
IPv4 privada en 7 países más ISP estática en Estados Unidos y Vietnam. Compra una sola IP o un lote; el precio por IP se reduce por volumen.
Consultar precios en vivo para EE. UU.