Hitelesített proxyk Node.js-ben: Axios, natív fetch és Got
A ProxyV4 mérnökcsapatától · Updated:
Node.js proxy megbízható használatához Axios alatt az httpsAgent-ként átadott HttpsProxyAgent szükséges, proxy: false beállítással kiegészítve. Az Axios saját proxy: { host, port } opciója nem nyit HTTP CONNECT alagutat, ezért https:// URL-eknél hibát jelez; a natív fetch() függvényhez helyette undici ProxyAgent kell. Ez az oldal bemutatja az egyes klienseket a(z) ProxyV4 http://user:pass@ip:port formátumú URL-jével, valamint a kilépő IP-cím ellenőrzését.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
Válassza ki a kódrészletet a használt HTTP-klienshez
Mindhárom kliens ugyanazt a proxy-URL-t használja. Állítsa össze a megrendelésben szereplő ip:port:user:pass sorból; a séma http:// marad, mivel a kliens HTTP-n kommunikál a proxyval, a TLS-t pedig azon keresztül alagutazza.
| Kliens | Telepítés | Proxy beállítása |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Native fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Miért fontos a `proxy: false` az Axiosban?
Az Axios magától ellenőrzi a HTTP_PROXY és a HTTPS_PROXY környezeti változókat. Ha valamelyik be van állítva a gépen (ami gyakori a CI-futtatókban és a konténerekben), és egy agentet is átad, a két konfiguráció ütközik. A proxy: false utasítja az Axiost a környezet és a beépített proxylogika figyelmen kívül hagyására, így kizárólag az agent dönti el, merre fusson a kérés.
Agentek újrafelhasználása több kérés között
- Hozzon létre egy-egy agentet proxy-IP-nként a lekérdezési cikluson kívül; az agent tárolja az életben tartott (keep-alive) socketeket, míg hívásonként egy új agent eldobja azokat
- Több proxy esetén tartson fenn egy IP–agent leképezést egy
Mapstruktúrában, és abból válasszon ahelyett, hogy menet közben hozna létre agenteket - Minden híváshoz adjon meg egy
timeoutértéket (példáultimeout: 10000az Axiosban), így a megakadt célpontok nem blokkolják végleg a workert - Adatformátumban van szüksége a proxylistára? A proxyformátum-konvertáló a
ip:port:user:passsorokat JSON-tömbbé alakítja, amelyet könnyen behívhat arequirevagyimportparanccsal
Milyen előnyöket nyújt a stabil IP a Node.js-feladatoknak?
A(z) ProxyV4 dedikált IPv4-címe a teljes bérleti időszak alatt egyetlen ügyfélhez tartozik, és megújításkor is változatlan marad, így az engedélyezési listán szereplő API-k, bejelentkezett munkamenetek vagy az adott IP-hez kötött lekérdezési korlátok (rate-limit) az élesítések között is érvényben maradnak. A sávszélesség nem korlátozott és nincs forgalomkorlát, ami kiszámíthatóvá teszi a hosszú ideig futó workerek működését. A webcrawling mintákért és az ütemezésért tekintse meg a web scraping használati esetet.
Lépésről lépésre
- 1
Telepítse a klienst és az agentet
Futtassa az
npm install axios https-proxy-agentparancsot a projektben (vagy a natívfetchhasználata esetén aznpm install undiciparancsot). - 2
Hozza létre az agentet egyszer
Hozza létre a
const agent = new HttpsProxyAgent('http://user:pass@ip:port');objektumot a(z) ProxyV4 rendelésében található adatokkal. - 3
Küldjön egy kérést rajta keresztül
Hívja meg a következőt:
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });. - 4
Hasonlítsa össze az IP-címet
A
console.log(res.data)parancsnak a proxy IP-címét kell kiírnia. Ha a szervere saját címét jeleníti meg, az agent nem lépett érvénybe.
Gyakran ismételt kérdések
Miért nem működik az Axios proxy: { host, port, auth } beállítása HTTPS-oldalakon?
Ez az opció sima HTTP-kérést küld a proxynak ahelyett, hogy először HTTP CONNECT alagutat kérne, így a célponthoz tartozó TLS-kapcsolat soha nem épül fel megfelelően. Használja az httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') beállítást, és adja meg a proxy: false értéket.
Hogyan adhatok proxyt a natív fetch() függvényhez Node 18, 20 vagy 22 alatt?
A Node fetch függvénye az undici könyvtárra épül, ezért importálja a ProxyAgent osztályt az undici csomagból, és adja át a { dispatcher: new ProxyAgent('http://user:pass@ip:port') } opciót a fetch() beállításai között.
A jelszavam @ vagy : karaktert tartalmaz. Megsérülhet az URL?
Igen, előfordulhat, mivel ezeknek a karaktereknek különleges jelentésük van az URL-ekben. Kódolja a jelszót percent-encoding eljárással az encodeURIComponent(password) segítségével, mielőtt összeállítaná a http://user:pass@ip:port karakterláncot.
A kérés 407-es hibát ad vissza. Mi a probléma?
A proxy válaszolt, de elutasította a bejelentkezést. Ellenőrizze újra a megrendelésben található felhasználónevet és jelszót; a 407 hibaelhárítási oldal felsorolja a leggyakoribb okokat.
Források
Statikus IPv4 a Node.js-workereihez
Dedikált IPv4 7 országban, valamint statikus ISP az Egyesült Államokban és Vietnámban, adatforgalmi korlát nélkül, IP-nként egy ügyféllel. Vásároljon egyet vagy többet.
Élő USA-árak megtekintése