Proxy có xác thực trong Node.js: Axios, native fetch và Got
Bởi Đội ngũ Kỹ thuật ProxyV4 · Updated:
Cách đáng tin cậy nhất để dùng proxy Node.js với Axios là truyền HttpsProxyAgent vào httpsAgent, đi kèm với proxy: false. Cấu hình proxy: { host, port } mặc định của Axios không mở đường hầm HTTP CONNECT, do đó sẽ bị lỗi với các URL https://; còn fetch() gốc cần dùng ProxyAgent của undici. Trang này hướng dẫn từng client với URL http://user:pass@ip:port của ProxyV4 và cách kiểm tra IP đầu ra.
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1,85 US$
- 3+ IP1,70 US$
- 10+ IP1,60 US$
- 25+ IP1,50 US$
- 50+ IP1,40 US$
- 100+ IP1,30 US$
- 200+ IP1,20 US$
- 500+ IP1,10 US$
- 1 IP1,85 US$
- 3+ IP1,70 US$
- 10+ IP1,60 US$
- 25+ IP1,50 US$
- 50+ IP1,40 US$
- 100+ IP1,30 US$
- 200+ IP1,20 US$
- 500+ IP1,10 US$
Chọn đoạn mã phù hợp cho HTTP client của bạn
Cả ba client đều dùng chung một định dạng URL proxy. Hãy tạo URL từ dòng ip:port:user:pass trong đơn hàng của bạn; giao thức vẫn là http:// vì client kết nối HTTP tới proxy và tạo đường hầm TLS qua đó.
| Client | Cài đặt | Cấu hình proxy |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Native fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
Vì sao `proxy: false` lại quan trọng trong Axios
Axios tự động kiểm tra các biến môi trường HTTP_PROXY và HTTPS_PROXY. Nếu một trong số đó được thiết lập trên máy (thường gặp ở CI runner và container) và bạn cũng truyền thêm một agent, hai cấu hình này sẽ xung đột nhau. proxy: false yêu cầu Axios bỏ qua biến môi trường cùng logic proxy tích hợp sẵn, giúp agent là yếu tố duy nhất quyết định nơi gửi request.
Tái sử dụng agent qua nhiều request
- Tạo một agent cho mỗi IP proxy bên ngoài vòng lặp request; agent sẽ giữ các socket keep-alive, trong khi tạo mới agent ở mỗi lệnh gọi sẽ hủy bỏ chúng
- Khi sử dụng nhiều proxy, hãy lưu
Mapánh xạ từ IP sang agent rồi lấy ra dùng, thay vì khởi tạo agent liên tục trong lúc chạy - Thiết lập
timeoutcho mỗi lệnh gọi (ví dụtimeout: 10000trong Axios) để một đích đến bị treo không làm worker bị nghẽn vô thời hạn - Cần danh sách proxy dưới dạng dữ liệu? Công cụ chuyển đổi định dạng proxy sẽ chuyển các dòng
ip:port:user:passthành mảng JSON để bạn có thểrequirehoặcimport
Lợi ích của IP tĩnh đối với tác vụ Node.js
IPv4 riêng của ProxyV4 chỉ thuộc về một khách hàng duy nhất trong suốt thời gian thuê và giữ nguyên địa chỉ khi bạn gia hạn, nhờ đó API trong allow-list, phiên đăng nhập hoặc hạn mức giới hạn tần suất gắn với IP đó vẫn giữ nguyên hiệu lực giữa các lần deploy. Băng thông không giới hạn giúp các worker chạy lâu dài luôn hoạt động ổn định và dễ dự đoán. Để biết các mô hình thu thập dữ liệu và điều tiết tốc độ, hãy xem trường hợp sử dụng cào web.
Từng bước thực hiện
- 1
Cài đặt client và agent
Chạy lệnh
npm install axios https-proxy-agenttrong dự án (hoặcnpm install undicinếu bạn dùngfetchgốc). - 2
Khởi tạo agent một lần
Tạo
const agent = new HttpsProxyAgent('http://user:pass@ip:port');với các thông số từ đơn hàng ProxyV4 của bạn. - 3
Gửi request qua agent
Gọi
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });. - 4
Kiểm tra và đối chiếu IP
console.log(res.data)sẽ in ra IP của proxy. Nếu in ra địa chỉ riêng của máy chủ của bạn, agent chưa được áp dụng.
Câu hỏi thường gặp
Vì sao proxy: { host, port, auth } của Axios bị lỗi trên các trang HTTPS?
Tùy chọn đó gửi một request HTTP thông thường đến proxy thay vì yêu cầu mở đường hầm HTTP CONNECT trước, khiến kết nối TLS tới trang đích không bao giờ được thiết lập chuẩn xác. Hãy dùng httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') và đặt proxy: false.
Làm thế nào để thêm proxy vào fetch() gốc trong Node 18, 20 hoặc 22?
fetch của Node hoạt động trên nền tảng undici, vì vậy hãy import ProxyAgent từ undici và truyền { dispatcher: new ProxyAgent('http://user:pass@ip:port') } vào phần tùy chọn của fetch().
Mật khẩu của tôi chứa ký tự @ hoặc :. URL có bị lỗi không?
Có thể, vì những ký tự đó mang ý nghĩa đặc biệt trong URL. Hãy mã hóa percent-encode mật khẩu bằng encodeURIComponent(password) trước khi bạn tạo chuỗi http://user:pass@ip:port.
Request trả về mã lỗi 407. Nguyên nhân là gì?
Proxy đã phản hồi nhưng từ chối đăng nhập. Hãy kiểm tra lại username và password từ đơn hàng của bạn; trang xử lý sự cố lỗi 407 liệt kê các nguyên nhân phổ biến.
Nguồn tham khảo
IPv4 tĩnh cho các worker Node.js của bạn
IPv4 riêng tại 7 quốc gia cùng ISP tĩnh tại Mỹ và Việt Nam, không giới hạn băng thông, một khách hàng mỗi IP. Mua một hoặc nhiều IP.
Xem bảng giá Mỹ trực tiếp