Նույնականացված պրոքսիներ Node.js-ում. Axios, ներկառուցված fetch և Got
ProxyV4-ի ինժեներական թիմի կողմից · Updated:
Axios-ի հետ Node.js պրոքսի օգտագործելու հուսալի եղանակը HttpsProxyAgent-ն է, որը փոխանցվում է որպես httpsAgent՝ proxy: false-ի հետ միասին: Axios-ի ներքին proxy: { host, port } կարգավորումը չի բացում HTTP CONNECT թունել, ուստի այն խափանվում է https:// URL-ների դեպքում. ներկառուցված fetch()-ին փոխարենն անհրաժեշտ է undici-ի ProxyAgent: Այս էջը ցույց է տալիս յուրաքանչյուր քլիենթի օգտագործումը ProxyV4-ի http://user:pass@ip:port URL-ով և ելքային IP-ն ստուգելու եղանակը:
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 $
- 3+ IP1,70 $
- 10+ IP1,60 $
- 25+ IP1,50 $
- 50+ IP1,40 $
- 100+ IP1,30 $
- 200+ IP1,20 $
- 500+ IP1,10 $
- 1 IP1,85 $
- 3+ IP1,70 $
- 10+ IP1,60 $
- 25+ IP1,50 $
- 50+ IP1,40 $
- 100+ IP1,30 $
- 200+ IP1,20 $
- 500+ IP1,10 $
Ընտրեք կոդի հատվածը ձեր HTTP քլիենթի համար
Բոլոր երեք քլիենթներն էլ ընդունում են նույն պրոքսի URL-ը: Կազմեք այն ձեր պատվերի ip:port:user:pass տողից. սխեման մնում է http://, քանի որ քլիենթը պրոքսիի հետ հաղորդակցվում է HTTP-ով և դրա միջոցով թունելավորում TLS-ը:
| Քլիենթ | Տեղադրում | Պրոքսիի միացում |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Ներկառուցված fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Ինչու է `proxy: false`-ը կարևոր Axios-ում
Axios-ն ինքնուրույն ստուգում է HTTP_PROXY և HTTPS_PROXY միջավայրի փոփոխականները: Եթե դրանցից որևէ մեկը սահմանված է համակարգում (հաճախ հանդիպում է CI runner-ներում և կոնտեյներներում), և դուք նաև փոխանցում եք agent, այդ երկու կարգավորումները բախվում են: proxy: false-ը հրահանգում է Axios-ին անտեսել միջավայրը և իր ներկառուցված պրոքսի տրամաբանությունը, որպեսզի միայն agent-ը որոշի, թե ուր է ուղղվում հարցումը:
Agent-ների վերաօգտագործումը բազմաթիվ հարցումների համար
- Ստեղծեք մեկական agent յուրաքանչյուր պրոքսի IP-ի համար հարցումների ցիկլից դուրս. agent-ը պահպանում է keep-alive սոկետները, իսկ յուրաքանչյուր կանչի համար նոր agent ստեղծելը վատնում է դրանք
- Մի քանի պրոքսիների դեպքում պահեք IP-ից դեպի agent համապատասխանեցման
Mapև ընտրեք դրանից, ոչ թե ստեղծեք agent-ներն ամեն անգամ - Յուրաքանչյուր կանչի համար սահմանեք
timeout(օրինակ՝timeout: 10000Axios-ում), որպեսզի մեկ կախված թիրախ անվերջ չարգելափակի worker-ը - Պրոքսիների ցանկն անհրաժե՞շտ է որպես տվյալներ: Պրոքսի ձևաչափի փոխարկիչը
ip:port:user:passտողերը վերածում է JSON զանգվածի, որը կարող եքrequireկամimportանել
Ինչ է տալիս ստատիկ IP-ն Node.js առաջադրանքին
ProxyV4-ի անհատական IPv4-ը ողջ վարձակալության ընթացքում պատկանում է մեկ հաճախորդի և պահպանում է նույն հասցեն երկարաձգելիս, ուստի այդ IP-ին կցված սպիտակ ցուցակի API-ն, մուտք գործած սեսիան կամ rate-limit-ի լիմիտը վավեր են մնում տեղակայումների (deploy) միջև: Թողունակությունը չի սահմանափակվում, ինչը երկարատև աշխատող worker-ների գործընթացը դարձնում է կանխատեսելի: Քրաուլինգի կառուցվածքի և արագության կարգավորման համար տեսեք վեբ սկրեյփինգի կիրառման տարբերակը:
Քայլ առ քայլ
- 1
Տեղադրեք քլիենթը և agent-ը
Նախագծում գործարկեք
npm install axios https-proxy-agent(կամnpm install undici, եթե օգտագործում եք ներկառուցվածfetch): - 2
Ստեղծեք agent-ը մեկ անգամ
Ստեղծեք
const agent = new HttpsProxyAgent('http://user:pass@ip:port');՝ օգտագործելով ձեր ProxyV4 պատվերի արժեքները: - 3
Ուղարկեք հարցումը դրա միջոցով
Կատարեք
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });կանչը: - 4
Համեմատեք IP-ն
console.log(res.data)-ը պետք է արտածի պրոքսիի IP-ն: Եթե այն ցուցադրում է ձեր սերվերի սեփական հասցեն, ապա agent-ը չի կիրառվել:
Հաճախ տրվող հարցեր
Ինչո՞ւ է Axios-ի proxy: { host, port, auth } տարբերակը խափանվում HTTPS կայքերում:
Այդ տարբերակը պրոքսիին ուղարկում է սովորական HTTP հարցում՝ նախապես HTTP CONNECT թունել հարցնելու փոխարեն, ուստի դեպի թիրախ TLS կապը երբեք ճիշտ չի կարգավորվում: Օգտագործեք httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') և սահմանեք proxy: false:
Ինչպե՞ս ավելացնել պրոքսի ներկառուցված fetch()-ին Node 18-ում, 20-ում կամ 22-ում:
Node-ի fetch-ն աշխատում է undici-ի հիման վրա, ուստի ներմուծեք ProxyAgent-ը undici-ից և փոխանցեք { dispatcher: new ProxyAgent('http://user:pass@ip:port') } որպես fetch()-ի պարամետրերի մաս:
Իմ գաղտնաբառը պարունակում է @ կամ :. URL-ը կխափանվի՞:
Կարող է, քանի որ այդ նիշերը հատուկ նշանակություն ունեն URL-ի մեջ: Կոդավորեք գաղտնաբառը encodeURIComponent(password)-ի միջոցով (percent-encoding), նախքան http://user:pass@ip:port-ը կազմելը:
Հարցումը վերադարձնում է 407: Ի՞նչն է սխալ:
Պրոքսին պատասխանել է, բայց մերժել է մուտքը: Կրկին ստուգեք օգտանունն ու գաղտնաբառը ձեր պատվերից. 407 սխալի կարգավորման էջը թվարկում է հիմնական պատճառները:
Աղբյուրներ
Ստատիկ IPv4 ձեր Node.js worker-ների համար
Անհատական IPv4 7 երկրներում, գումարած ստատիկ ISP ԱՄՆ-ում և Վիետնամում, անսահմանափակ թրաֆիկ, մեկ հաճախորդ մեկ IP-ի համար: Գնեք մեկ կամ մի քանի հատ:
Դիտել ԱՄՆ ընթացիկ գները