Проксита с автентикация в Node.js: Axios, вграден fetch и Got
От инженерния екип на ProxyV4 · Updated:
Надеждният начин да използвате Node.js прокси с Axios е чрез HttpsProxyAgent, подаден като httpsAgent, заедно с proxy: false. Собствената настройка proxy: { host, port } на Axios не отваря HTTP CONNECT тунел и съответно дава грешка при https:// адреси; вграденият fetch() изисква undici ProxyAgent. Тази страница показва всеки клиент с ProxyV4 http://user:pass@ip:port URL и как да потвърдите изходния IP адрес.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 щ.д.
- 3+ IP адреса1,70 щ.д.
- 10+ IP адреса1,60 щ.д.
- 25+ IP адреса1,50 щ.д.
- 50+ IP адреса1,40 щ.д.
- 100+ IP адреса1,30 щ.д.
- 200+ IP адреса1,20 щ.д.
- 500+ IP адреса1,10 щ.д.
- 1 IP1,85 щ.д.
- 3+ IP адреса1,70 щ.д.
- 10+ IP адреса1,60 щ.д.
- 25+ IP адреса1,50 щ.д.
- 50+ IP адреса1,40 щ.д.
- 100+ IP адреса1,30 щ.д.
- 200+ IP адреса1,20 щ.д.
- 500+ IP адреса1,10 щ.д.
Изберете готовия код за вашия HTTP клиент
И трите клиента приемат един и същ прокси URL. Съставете го от реда ip:port:user:pass във вашата поръчка; схемата остава http://, тъй като клиентът комуникира с проксито по HTTP и тунелира TLS през него.
| Клиент | Инсталация | Свързване на проксито |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Вграден fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Защо `proxy: false` е от значение в Axios
Axios проверява самостоятелно системните променливи HTTP_PROXY и HTTPS_PROXY. Ако някоя от тях е зададена на машината (често срещано в CI среди и контейнери) и същевременно подадете агент, двете конфигурации влизат в конфликт. proxy: false указва на Axios да игнорира средата и вградената си прокси логика, така че единствено агентът да определя накъде се изпраща заявката.
Преизползване на агенти при множество заявки
- Създайте по един агент за всяко прокси IP извън цикъла за заявки; агентът поддържа keep-alive сокети, а създаването на нов агент за всяко извикване ги унищожава
- При няколко проксита поддържайте
Mapот IP към агент и взимайте от него, вместо да създавате агенти в движение - Задавайте
timeoutна всяко извикване (напримерtimeout: 10000в Axios), за да не блокира завинаги бавен краен сървър даден уъркър - Нуждаете се от прокси списъка като данни? Конверторът на прокси формати преобразува редовете
ip:port:user:passв JSON масив, който можете директно да заредите сrequireилиimport
Какво дава стабилният IP адрес на дадена Node.js задача
Индивидуалният IPv4 адрес от ProxyV4 принадлежи само на един клиент за целия период на наемане и запазва същия адрес при подновяване, така че API с бели списъци, вписана сесия или лимит на заявките, обвързан с този IP адрес, остават валидни между внедряванията. Трафикът е неограничен, което прави дълго работещите процеси предвидими. За модели на обхождане и контрол на скоростта вижте случая на употреба за web scraping.
Стъпка по стъпка
- 1
Инсталирайте клиента и агента
Изпълнете
npm install axios https-proxy-agentв проекта (илиnpm install undici, ако използвате вграденfetch). - 2
Инициализирайте агента еднократно
Създайте
const agent = new HttpsProxyAgent('http://user:pass@ip:port');със стойностите от поръчката ви в ProxyV4. - 3
Изпратете заявка през него
Извикайте
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });. - 4
Сравнете IP адреса
console.log(res.data)трябва да изведе прокси IP адреса. Ако изведе собствения адрес на сървъра ви, агентът не е бил приложен.
Често задавани въпроси
Защо proxy: { host, port, auth } в Axios дава грешка при HTTPS сайтове?
Тази опция изпраща обикновена HTTP заявка към проксито, вместо първо да поиска HTTP CONNECT тунел, поради което TLS връзката с крайната цел не се установява коректно. Използвайте httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') и задайте proxy: false.
Как да добавя прокси към вградения fetch() в Node 18, 20 или 22?
Функцията fetch в Node работи върху undici, затова импортирайте ProxyAgent от undici и подайте { dispatcher: new ProxyAgent('http://user:pass@ip:port') } като част от опциите на fetch().
Паролата ми съдържа @ или :. Ще се счупи ли URL адресът?
Възможно е, тъй като тези символи имат специално значение в URL адреса. Кодирайте паролата с процентно кодиране чрез encodeURIComponent(password), преди да съставите http://user:pass@ip:port.
Заявката връща грешка 407. Какъв е проблемът?
Проксито е отговорило, но е отхвърлило данните за вход. Проверете отново потребителското име и паролата от поръчката си; на страницата за отстраняване на грешка 407 са описани най-честите причини.
Източници
Статични IPv4 адреси за вашите Node.js процеси
Индивидуални IPv4 в 7 държави плюс статични ISP в САЩ и Виетнам, неограничен трафик, един клиент на IP адрес. Купете един или множество.
Вижте актуалните цени за САЩ