Proxy terautentikasi di Node.js: Axios, native fetch, dan Got
Oleh Tim Engineering ProxyV4 · Updated:
Cara andal menggunakan proxy Node.js dengan Axios adalah meneruskan HttpsProxyAgent sebagai httpsAgent, bersama dengan proxy: false. Pengaturan proxy: { host, port } bawaan Axios tidak membuka tunnel HTTP CONNECT, sehingga gagal pada URL https://; sebagai gantinya, fetch() native memerlukan ProxyAgent dari undici. Halaman ini menampilkan tiap client dengan URL ProxyV4 http://user:pass@ip:port dan cara mengonfirmasi IP keluaran.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IPUS$1,85
- 3+ IPUS$1,70
- 10+ IPUS$1,60
- 25+ IPUS$1,50
- 50+ IPUS$1,40
- 100+ IPUS$1,30
- 200+ IPUS$1,20
- 500+ IPUS$1,10
- 1 IPUS$1,85
- 3+ IPUS$1,70
- 10+ IPUS$1,60
- 25+ IPUS$1,50
- 50+ IPUS$1,40
- 100+ IPUS$1,30
- 200+ IPUS$1,20
- 500+ IPUS$1,10
Pilih cuplikan kode untuk client HTTP Anda
Ketiga client menggunakan URL proxy yang sama. Susun URL dari baris ip:port:user:pass pada pesanan Anda; skemanya tetap http:// karena client berkomunikasi via HTTP ke proxy dan melakukan tunneling TLS melaluinya.
| Client | Instalasi | Konfigurasi proxy |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Native fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Alasan `proxy: false` penting di Axios
Axios secara otomatis memeriksa variabel lingkungan HTTP_PROXY dan HTTPS_PROXY. Jika salah satunya disetel di mesin (umum pada runner CI dan container) dan Anda juga meneruskan agent, kedua konfigurasi akan bertabrakan. proxy: false menginstruksikan Axios untuk mengabaikan lingkungan sekitar serta logika proxy bawaannya, sehingga hanya agent yang menentukan ke mana request diarahkan.
Menggunakan ulang agent di banyak request
- Buat satu agent per IP proxy di luar perulangan request Anda; agent mempertahankan soket keep-alive, sedangkan membuat agent baru di tiap pemanggilan akan membuangnya
- Jika menggunakan beberapa proxy, simpan
Mapdari IP ke agent dan pilih dari sana, daripada membuat agent secara langsung setiap saat - Beri
timeoutpada setiap pemanggilan (misalnyatimeout: 10000di Axios) agar target yang macet tidak menahan worker selamanya - Butuh daftar proxy dalam format data? Pengonversi format proxy mengubah baris
ip:port:user:passmenjadi array JSON yang dapat Andarequireatauimport
Keunggulan IP stabil untuk tugas Node.js
IPv4 privat ProxyV4 diperuntukkan bagi satu pelanggan selama masa sewa dan mempertahankan alamat yang sama saat diperpanjang, sehingga API yang masuk daftar izin, sesi login, atau batas rate limit yang terikat ke IP tersebut tetap valid antar-deployment. Bandwidth tidak dibatasi, menjaga worker yang berjalan lama tetap dapat diprediksi. Untuk pola crawling dan penyesuaian kecepatan, lihat studi kasus web scraping.
Langkah demi langkah
- 1
Instal client dan agent
Jalankan
npm install axios https-proxy-agentdi proyek Anda (ataunpm install undicijika Anda menggunakanfetchnative). - 2
Buat agent sekali saja
Buat
const agent = new HttpsProxyAgent('http://user:pass@ip:port');dengan nilai dari pesanan ProxyV4 Anda. - 3
Kirim request melaluinya
Panggil
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });. - 4
Bandingkan IP
console.log(res.data)harus mencetak IP proxy. Jika yang muncul adalah alamat server Anda sendiri, berarti agent tidak diterapkan.
Pertanyaan yang sering diajukan
Mengapa opsi proxy: { host, port, auth } pada Axios gagal di situs HTTPS?
Opsi tersebut mengirimkan request HTTP biasa ke proxy alih-alih meminta tunnel HTTP CONNECT terlebih dahulu, sehingga TLS ke target tidak pernah terbentuk dengan benar. Gunakan httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') dan atur proxy: false.
Bagaimana cara menambahkan proxy ke fetch() native di Node 18, 20, atau 22?
fetch pada Node berjalan di atas undici, jadi impor ProxyAgent dari undici dan teruskan { dispatcher: new ProxyAgent('http://user:pass@ip:port') } sebagai bagian dari opsi fetch().
Kata sandi saya mengandung @ atau :. Apakah URL akan rusak?
Bisa, karena karakter tersebut memiliki arti khusus di dalam URL. Lakukan percent-encode pada kata sandi menggunakan encodeURIComponent(password) sebelum Anda menyusun http://user:pass@ip:port.
Request menghasilkan error 407. Apa yang salah?
Proxy merespons tetapi menolak login. Periksa kembali username dan kata sandi dari pesanan Anda; halaman pemecahan masalah 407 merangkum penyebab umumnya.
Sumber
IPv4 statis untuk worker Node.js Anda
IPv4 privat di 7 negara plus ISP statis di AS dan Vietnam, unmetered, satu pelanggan per IP. Beli satu atau banyak.
Lihat harga AS terkini