Използване на cURL с автентикирано прокси: команди, доказващи, че работи
От инженерния екип на ProxyV4 · Updated:
За да стартирате cURL през прокси, подайте адреса на проксито с -x и вашите данни за вход с -U или въведете и двете в един URL адрес http://user:pass@ip:port. Преди да свържете ProxyV4 IP със скрапер, браузърен профил или cron задача, едно извикване на cURL от същата машина бързо ви показва три неща: идентификационните данни се приемат, изходящият IP адрес е наетият от вас и двупосочното време за отговор е нормално.
curl -x http://user:pass@ip:port https://proxyv4.com/api/my-ip- 1 IP1,85 щ.д.
- 3+ IP адреса1,70 щ.д.
- 10+ IP адреса1,60 щ.д.
- 25+ IP адреса1,50 щ.д.
- 50+ IP адреса1,40 щ.д.
- 100+ IP адреса1,30 щ.д.
- 200+ IP адреса1,20 щ.д.
- 500+ IP адреса1,10 щ.д.
- 1 IP1,85 щ.д.
- 3+ IP адреса1,70 щ.д.
- 10+ IP адреса1,60 щ.д.
- 25+ IP адреса1,50 щ.д.
- 50+ IP адреса1,40 щ.д.
- 100+ IP адреса1,30 щ.д.
- 200+ IP адреса1,20 щ.д.
- 500+ IP адреса1,10 щ.д.
От реда в контролния панел до cURL аргумент
Вашата поръчка пристига във формат ip:port:user:pass. cURL не чете този формат директно, затова го разделете: първите две полета отиват в -x http://ip:port, а последните две – в -U user:pass. Форматът с един URL адрес http://user:pass@ip:port е по-кратък, но всеки символ @, : или # в паролата тогава трябва да се кодира с процентно кодиране, поради което разделеният формат е по-безопасният избор по подразбиране в скриптове.
Запазете схемата http:// за проксито дори когато целта е https://. cURL комуникира с чист HTTP към проксито, изисква от него да отвори тунел чрез CONNECT и след това стартира TLS към уебсайта през този тунел, така че самата страница остава криптирана от край до край.
Справочник на командите
| Цел | Команда | Разчитане на резултата |
|---|---|---|
| Вижте кой IP адрес вижда интернет | curl -x http://user:pass@ip:port https://proxyv4.com/api/my-ip | Отпечатаният адрес трябва да съвпада с IP адреса на проксито, а не с вашия собствен |
| Подаване на данните за вход отделно | curl -x http://ip:port -U "user:pass" https://proxyv4.com/api/my-ip | Същият резултат; не е необходимо URL кодиране за специални символи в паролата |
| Само статус ред и заглавки | curl -I -x http://user:pass@ip:port https://example.com | Ред със статус 2xx или 3xx означава, че целевият сайт е отговорил през проксито |
| Време за свързване и време до първия байт | curl -s -o /dev/null -w "Connect:%{time_connect}s TTFB:%{time_starttransfer}s\n" -x http://user:pass@ip:port https://example.com | Две числа в секунди; сравнете ги между различни проксита или локации |
Дебъгване на неуспешна заявка с -v
Добавете -v и прочетете редовете, които започват с > и <. При нормално изпълнение се вижда как cURL изпраща CONNECT със заглавка Proxy-Authorization, а проксито отговаря с HTTP/1.1 200 Connection established, последвано от TLS ръкостискането с целта.
Ако отговорът е HTTP/1.1 407 Proxy Authentication Required, връзката с проксито е осъществена и само потребителското име или паролата са грешни; ръководството за грешка 407 разглежда обичайните причини. Ако cURL изобщо не получи отговор, проблемът е в достъпността, така че първо проверете IP адреса и порта с инструмента за проверка на портове.
За бърза справка между кодовете за изход на curl и причините за тях, както и за същите проверки при Docker, Selenium и Puppeteer, вижте проксито не работи.
Windows, скриптове и настройки по подразбиране
- Windows PowerShell асоциира
curlсInvoke-WebRequest, който не поддържа-x; въведетеcurl.exe, за да извикате реалния изпълним файл - В Windows заменете
-o /dev/nullс-o NULв командата за измерване на времето - В cron задачи и shell скриптове добавете
--connect-timeout 5 --max-time 15, така че една бавна цел да не блокира цялото изпълнение - За да пренасочвате всяко cURL извикване през едно и също прокси, добавете
proxy = "http://user:pass@ip:port"в~/.curlrcи го премахнете, когато приключите с тестването
Стъпка по стъпка
- 1
Отворете команден ред
Използвайте Terminal в macOS или Linux, или cmd / PowerShell в Windows (където командата е
curl.exe). - 2
Поискайте вашия изходящ IP адрес през проксито
Изпълнете
curl.exe -x http://user:pass@ip:port https://proxyv4.com/api/my-ipсъс стойностите от вашата ProxyV4 поръчка и проверете дали отпечатаният адрес е IP адресът на проксито. - 3
Вижте ръкостискането, ако заявката е неуспешна
Повторете извикването с
-vи намерете отговора на проксито наCONNECT: 200 означава, че тунелът е отворен, а 407 – че входът е отказан. - 4
Подсигурете командата за автоматизация
Преди да добавите реда в скрипт, включете
--connect-timeout 5 --max-time 15.
Често задавани въпроси
Защо PowerShell отхвърля curl -x с грешка в параметъра?
В PowerShell curl е псевдоним за Invoke-WebRequest, който няма опция -x. Извикайте curl.exe -x http://user:pass@ip:port ... и Windows ще стартира оригиналния cURL вместо него.
cURL показва 407 Proxy Authentication Required. Проксито не работи ли?
Не. 407 е отговор от проксито, което означава, че IP адресът и портът са достъпни. Потребителското име или паролата, подадени на -x или -U, не съвпадат; копирайте ги отново от поръчката и внимавайте за специални символи в паролата.
Трябва ли да въртя cURL в цикъл, за да тествам цял списък с проксита?
Не и за бърза проверка на състоянието. Уеб инструментът за проверка на проксита приема до 100 проксита едновременно и не запазва пароли, а тестът за скорост на проксита сравнява латентността без нужда от скрипт.
Източници
Индивидуални IPv4 адреси, издържащи cURL теста
Един клиент за IP адрес, неограничен трафик, HTTP(S) с потребителско име и парола, в 7 държави. Вижте актуалните цени.
Вижте актуалните цени на прокситата