Node.js-тегі аутентификацияланған проксилер: Axios, нативті fetch және Got
ProxyV4 инженерлік тобынан · Updated:
Node.js-те Axios-пен проксиді сенімді пайдаланудың жолы — proxy: false баптауымен бірге httpsAgent ретінде берілетін HttpsProxyAgent. Axios-тың жеке proxy: { host, port } баптауы HTTP CONNECT туннелін ашпайды, сондықтан https:// URL мекенжайларында қате береді; ал нативті fetch() үшін оның орнына undici ProxyAgent қажет. Бұл бетте әр клиентті ProxyV4 http://user:pass@ip:port URL мекенжайымен қалай қолдану керектігі және шығыс IP-ді тексеру жолы көрсетілген.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 $
- 3+ IP1,70 $
- 10+ IP1,60 $
- 25+ IP1,50 $
- 50+ IP1,40 $
- 100+ IP1,30 $
- 200+ IP1,20 $
- 500+ IP1,10 $
- 1 IP1,85 $
- 3+ IP1,70 $
- 10+ IP1,60 $
- 25+ IP1,50 $
- 50+ IP1,40 $
- 100+ IP1,30 $
- 200+ IP1,20 $
- 500+ IP1,10 $
HTTP клиентіңізге сәйкес келетін кодты таңдаңыз
Үш клиент те бірдей прокси URL мекенжайын қабылдайды. Оны тапсырысыңыздағы ip:port:user:pass жолынан құрастырыңыз; схемасы http:// болып қалады, өйткені клиент проксимен HTTP арқылы байланысады және ол арқылы TLS туннелін орнатады.
| Клиент | Орнату | Проксиді қосу |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Нативті fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Axios-та неліктен `proxy: false` маңызды
Axios HTTP_PROXY және HTTPS_PROXY орта айнымалыларын өздігінен тексереді. Егер олардың бірі құрылғыда орнатылған болса (CI раннерлері мен контейнерлерде жиі кездеседі) және сіз агентті де берсеңіз, екі конфигурация өзара қайшы келеді. proxy: false параметрі Axios-қа ортаны және кірістірілген прокси логикасын елемеуді нұсқайды, осылайша сұраудың қайда жіберілетінін тек агент қана анықтайды.
Агенттерді көптеген сұрауларда қайта пайдалану
- Сұрау циклінен тыс әрбір прокси IP үшін бір агент жасаңыз; агент keep-alive сокеттерін сақтайды, ал әр шақыру сайын жаңа агент құру оларды жойып жібереді
- Бірнеше прокси болғанда, агенттерді жол-жөнекей құра бермей, IP-ден агентке бағытталған
Mapқұрылымын сақтап, содан алыңыз - Әрбір шақыруға
timeoutберіңіз (мысалы, Axios-таtimeout: 10000), сонда кідірген бір нысана бүкіл воркерді мәңгіге ұстап тұрмайды - Проксилер тізімі деректер түрінде қажет пе? Прокси пішімін түрлендіргіш
ip:port:user:passжолдарын сізrequireнемесеimportете алатын JSON массивіне айналдырады
Тұрақты IP Node.js тапсырмасына не береді
ProxyV4 жеке IPv4 мекенжайы жалдау мерзімі бойы бір тұтынушыға тиесілі болады және мерзімін ұзартқан кезде өзгермейді, сондықтан осы IP-ге байланған рұқсат етілген тізімдегі API, жүйеге кірген сессия немесе rate-limit лимиті деплойлар арасында жарамды болып қала береді. Трафик шектелмейді (өлшенбейді), бұл ұзақ жұмыс істейтін воркерлердің болжамдылығын қамтамасыз етеді. Деректерді жинау үлгілері мен қарқынын реттеу үшін веб-скрейпинг сценарийін қараңыз.
Қадамдық нұсқаулық
- 1
Клиент пен агентті орнатыңыз
Жобада
npm install axios https-proxy-agentкомандасын орындаңыз (немесе нативтіfetchқолдансаңызnpm install undici). - 2
Агентті бір рет құрыңыз
ProxyV4 тапсырысыңыздағы мәндермен
const agent = new HttpsProxyAgent('http://user:pass@ip:port');құрыңыз. - 3
Ол арқылы сұрау жіберіңіз
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });шақырыңыз. - 4
IP-ді салыстырыңыз
console.log(res.data)прокси IP-ін шығаруы керек. Егер ол серверіңіздің өз мекенжайын шығарса, агент қолданылмаған.
Жиі қойылатын сұрақтар
Axios-тағы proxy: { host, port, auth } параметрі HTTPS сайттарында неге істемейді?
Бұл опция алдымен HTTP CONNECT туннелін сұраудың орнына проксиге кәдімгі HTTP сұрауын жібереді, сондықтан нысанаға TLS байланысы дұрыс орнатылмайды. httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') пайдаланыңыз және proxy: false мәнін орнатыңыз.
Node 18, 20 немесе 22-де нативті fetch()-ке проксиді қалай қосуға болады?
Node-тағы fetch undici негізінде жұмыс істейді, сондықтан undici кітапханасынан ProxyAgent импорттап, оны fetch() параметрлерінің бөлігі ретінде { dispatcher: new ProxyAgent('http://user:pass@ip:port') } түрінде беріңіз.
Құпиясөзімде @ немесе : бар. Бұл URL-ді бұза ма?
Бұзуы мүмкін, өйткені бұл таңбалардың URL ішінде арнайы мағынасы бар. http://user:pass@ip:port құрастырмас бұрын құпиясөзді encodeURIComponent(password) көмегімен пайыздық кодтаудан өткізіңіз (percent-encode).
Сұрау 407 қатесін қайтарады. Не дұрыс емес?
Прокси жауап берді, бірақ логинді қабылдамады. Тапсырысыңыздағы пайдаланушы аты мен құпиясөзді қайта тексеріңіз; 407 ақаулықтарды жою бетінде жиі кездесетін себептер көрсетілген.
Дереккөздер
Node.js воркерлеріңіз үшін статикалық IPv4
7 елдегі жеке IPv4 және АҚШ пен Вьетнамдағы статикалық ISP, шектеусіз трафик, бір IP-ге бір тұтынушы. Біреуін немесе көбін сатып алыңыз.
АҚШ бойынша ағымдағы бағаларды көру