Autentikoidut proxyt Node.js:ssä: Axios, natiivi fetch ja Got
Kirjoittanut ProxyV4-kehitystiimi · Updated:
Luotettava tapa käyttää Node.js-proxya Axioksen kanssa on httpsAgent-parametrina annettava HttpsProxyAgent yhdessä asetuksen proxy: false kanssa. Axioksen oma proxy: { host, port } -asetus ei avaa HTTP CONNECT -tunnelia, joten se epäonnistuu https://-osoitteissa; natiivi fetch() vaatii puolestaan undici-kirjaston ProxyAgent-agentin. Tällä sivulla esitellään jokainen asiakasohjelma ProxyV4-palvelun http://user:pass@ip:port-osoitteella sekä ulospäin näkyvän IP-osoitteen varmistaminen.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 $
- 3+ IP:tä1,70 $
- 10+ IP:tä1,60 $
- 25+ IP:tä1,50 $
- 50+ IP:tä1,40 $
- 100+ IP:tä1,30 $
- 200+ IP:tä1,20 $
- 500+ IP:tä1,10 $
- 1 IP1,85 $
- 3+ IP:tä1,70 $
- 10+ IP:tä1,60 $
- 25+ IP:tä1,50 $
- 50+ IP:tä1,40 $
- 100+ IP:tä1,30 $
- 200+ IP:tä1,20 $
- 500+ IP:tä1,10 $
Valitse koodinpätkä HTTP-asiakasohjelmallesi
Kaikki kolme asiakasohjelmaa käyttävät samaa proxy-URL-osoitetta. Muodosta se tilauksesi ip:port:user:pass-rivistä; protokollaksi jää http://, koska asiakasohjelma liikennöi proxyn kanssa HTTP:llä ja tunneloi TLS-yhteyden sen läpi.
| Asiakasohjelma | Asennus | Proxyn kytkentä |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Natiivi fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Miksi `proxy: false` on tärkeä Axioksessa
Axios tarkistaa itsenäisesti ympäristömuuttujat HTTP_PROXY ja HTTPS_PROXY. Jos jompikumpi niistä on asetettu koneella (tavallista CI-ajureissa ja konteissa) ja annat samalla agentin, nämä kaksi määritystä aiheuttavat ristiriidan. proxy: false käskee Axiosta ohittamaan ympäristön ja sen sisäänrakennetun proxylogiikan, jolloin pelkkä agentti määrittää, mihin pyyntö ohjataan.
Agenttien uudelleenkäyttö useissa pyynnöissä
- Luo yksi agentti proxy-IP:tä kohden pyyntösilmukan ulkopuolella; agentti pitää yllä keep-alive-socketeja, kun taas uusi agentti jokaista kutsua varten heittää ne hukkaan
- Jos käytössä on useita proxyja, pidä yllä
Map-rakennetta IP-osoitteista agenteille ja valitse siitä sen sijaan, että loisit agentteja lennossa - Määritä jokaiselle kutsulle
timeout(esimerkiksitimeout: 10000Axioksessa), jotta yksi jumiutunut kohde ei varaa worker-prosessia ikuisesti - Tarvitsetko proxylistan datana? Proxyn muotomuunnin muuntaa
ip:port:user:pass-rivit JSON-taulukoksi, jonka voit tuoda komennollarequiretaiimport
Mitä vakaa IP tarjoaa Node.js-ajoon
ProxyV4-palvelun oma privaatti IPv4 kuuluu yhdelle asiakkaalle koko vuokra-ajan ja säilyttää saman osoitteen tilausta uusittaessa, joten sallittujen luetteloon lisätty API, sisäänkirjautunut istunto tai tiettyyn IP-osoitteeseen sidottu kutsurajoitusbudjetti pysyy voimassa myös käyttöönottojen välillä. Kaistanleveyttä ei mitata, mikä pitää pitkäkestoiset worker-prosessit ennakoitavina. Lisätietoja tiedonkeruun malleista ja tahdituksesta löydät sivulta verkkosivujen tiedonkeruu -käyttötapaus.
Vaihe vaiheelta
- 1
Asenna asiakasohjelma ja agentti
Suorita projektissa
npm install axios https-proxy-agent(tainpm install undici, jos käytät natiiviafetch-funktiota). - 2
Luo agentti kerran
Määritä
const agent = new HttpsProxyAgent('http://user:pass@ip:port');käyttäen ProxyV4-tilauksesi arvoja. - 3
Lähetä pyyntö sen kautta
Kutsu
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });. - 4
Vertaa IP-osoitetta
console.log(res.data):n pitäisi tulostaa proxyn IP-osoite. Jos se tulostaa oman palvelimesi osoitteen, agenttia ei otettu käyttöön.
Usein kysytyt kysymykset
Miksi Axioksen proxy: { host, port, auth } epäonnistuu HTTPS-sivustoilla?
Kyseinen asetus lähettää proxylle tavallisen HTTP-pyynnön sen sijaan, että se pyytäisi ensin HTTP CONNECT -tunnelia, joten TLS-yhteyttä kohteeseen ei koskaan muodosteta asianmukaisesti. Käytä määritystä httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') ja aseta proxy: false.
Miten lisään proxyn natiiviin fetch()-funktioon Node 18-, 20- tai 22-versiossa?
Noden fetch toimii undicilla, joten tuo ProxyAgent paketista undici ja anna { dispatcher: new ProxyAgent('http://user:pass@ip:port') } osana fetch()-funktion asetuksia.
Salasanani sisältää merkin @ tai :. Rikkooko se URL-osoitteen?
Voi rikkoa, koska kyseisillä merkeillä on erityismerkitys URL-osoitteessa. Prosenttikoodaa salasana funktiolla encodeURIComponent(password) ennen kuin muodostat osoitteen http://user:pass@ip:port.
Pyyntö palauttaa koodin 407. Mikä on vialla?
Proxy vastasi mutta hylkäsi kirjautumisen. Tarkista tilauksesi käyttäjätunnus ja salasana uudelleen; sivulla 407-virheen vianmääritys on lueteltu yleisimmät syyt.
Lähteet
Staattinen IPv4 Node.js-worker-prosesseillesi
Oma privaatti IPv4 7 maassa sekä staattinen ISP Yhdysvalloissa ja Vietnamissa, rajoittamaton kaista, yksi asiakas IP-osoitetta kohden. Osta yksi tai useampi.
Katso Yhdysvaltojen ajantasaiset hinnat