ប្រូកស៊ីដែលមានការផ្ទៀងផ្ទាត់ក្នុង Node.js៖ Axios, native fetch និង Got
ដោយក្រុមវិស្វកម្ម ProxyV4 · Updated:
វិធីដែលអាចទុកចិត្តបានក្នុងការប្រើប្រូកស៊ី Node.js ជាមួយ Axios គឺប្រើ HttpsProxyAgent បញ្ជូនជា httpsAgent រួមជាមួយ proxy: false។ ការកំណត់ proxy: { host, port } ផ្ទាល់របស់ Axios មិនបើក tunnel HTTP CONNECT ទេ ដូច្នេះវានឹងខូចលើ URL https:// ហើយ native fetch() ត្រូវការ undici ProxyAgent ជំនួសវិញ។ ទំព័រនេះបង្ហាញអំពី client នីមួយៗជាមួយ URL ProxyV4 http://user:pass@ip:port និងរបៀបផ្ទៀងផ្ទាត់ IP ចេញក្រៅ។
new HttpsProxyAgent('http://user:pass@ip:port')- 1 IP1.85$
- 3+ IP1.70$
- 10+ IP1.60$
- 25+ IP1.50$
- 50+ IP1.40$
- 100+ IP1.30$
- 200+ IP1.20$
- 500+ IP1.10$
- 1 IP1.85$
- 3+ IP1.70$
- 10+ IP1.60$
- 25+ IP1.50$
- 50+ IP1.40$
- 100+ IP1.30$
- 200+ IP1.20$
- 500+ IP1.10$
ជ្រើសរើសកូដ snippet សម្រាប់ HTTP client របស់អ្នក
client ទាំងបីប្រើ URL ប្រូកស៊ីដូចគ្នា។ បង្កើតវាពីបន្ទាត់ ip:port:user:pass នៅក្នុងការបញ្ជាទិញរបស់អ្នក។ scheme នៅតែជា http:// ពីព្រោះ client ភ្ជាប់ HTTP ទៅកាន់ប្រូកស៊ី ហើយធ្វើ tunnel TLS ឆ្លងកាត់វា។
| Client | ដំឡើង | ការភ្ជាប់ប្រូកស៊ី |
|---|---|---|
| Axios | npm i https-proxy-agent | axios.get(url, { httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port'), proxy: false }) |
Native fetch (Node 18+) | npm i undici | fetch(url, { dispatcher: new ProxyAgent('http://user:pass@ip:port') }) |
| Got | npm i hpagent | got(url, { agent: { https: new HttpsProxyAgent({ proxy: 'http://user:pass@ip:port' }) } }) |
ហេតុអ្វី `proxy: false` មានសារៈសំខាន់ក្នុង Axios
Axios ពិនិត្យមើល environment variable HTTP_PROXY និង HTTPS_PROXY ដោយខ្លួនឯង។ ប្រសិនបើមានមួយត្រូវបានកំណត់លើម៉ាស៊ីន (ជាទូទៅក្នុង CI runner និង container) ហើយអ្នកបញ្ជូន agent ទៅទៀតនោះ ការកំណត់ទាំងពីរប៉ះទង្គិចគ្នា។ proxy: false ប្រាប់ Axios ឱ្យមិនអើពើនឹង environment និង logic ប្រូកស៊ីដែលភ្ជាប់មកជាមួយ ដូច្នេះ agent ជាអ្នកសម្រេចតែមួយគត់ថាតើសំណើត្រូវបញ្ជូនទៅទីណា។
ការប្រើប្រាស់ agent ឡើងវិញឆ្លងកាត់សំណើជាច្រើន
- បង្កើត agent មួយសម្រាប់ proxy IP នីមួយៗនៅខាងក្រៅ request loop របស់អ្នក។ agent រក្សាទុក keep-alive socket ហើយការបង្កើត agent ថ្មីរាល់ពេល call នឹងបោះបង់ពួកវាចោល
- ប្រសិនបើមានប្រូកស៊ីច្រើន ចូររក្សាទុក
Mapពី IP ទៅ agent ហើយជ្រើសរើសពីវា ជាជាងការបង្កើត agent ភ្លាមៗរាល់ពេល - កំណត់
timeoutសម្រាប់រាល់ការ call (ឧទាហរណ៍timeout: 10000ក្នុង Axios) ដើម្បីកុំឱ្យ target គាំងមួយបង្អាក់ដំណើរការ worker ជារៀងរហូត - ត្រូវការបញ្ជីប្រូកស៊ីជាទិន្នន័យមែនទេ? ឧបករណ៍បំប្លែងទម្រង់ប្រូកស៊ី នឹងបំប្លែងបន្ទាត់
ip:port:user:passទៅជា JSON array ដែលអ្នកអាចrequireឬimportបាន
អត្ថប្រយោជន៍ដែល IP ថេរផ្តល់ឱ្យដំណើរការ Node.js
IPv4 ឯកជនរបស់ ProxyV4 ជារបស់អតិថិជនតែម្នាក់គត់សម្រាប់រយៈពេលជួលទាំងមូល និងរក្សាអាសយដ្ឋានដដែលនៅពេលអ្នកបន្តសុពលភាព ដូច្នេះ API ដែលស្ថិតក្នុង allow-list, session ដែលបានចូលប្រើ ឬកម្រិត rate-limit ដែលភ្ជាប់ជាមួយ IP នោះនៅតែមានសុពលភាពនៅចន្លោះពេល deploy។ កម្រិតបញ្ជូនមិនកំណត់ទំហំប្រើប្រាស់ទេ ដែលធ្វើឱ្យ worker ដំណើរការយូរអង្វែងមានស្ថិរភាពរលូន។ សម្រាប់ទម្រង់នៃការទាញយកទិន្នន័យ (crawling) និងល្បឿន សូមមើល ករណីប្រើប្រាស់ web scraping។
មួយជំហានម្តងៗ
- 1
ដំឡើង client និង agent
ដំណើរការ
npm install axios https-proxy-agentនៅក្នុងគម្រោង (ឬnpm install undiciប្រសិនបើអ្នកប្រើ nativefetch)។ - 2
បង្កើត agent ម្តង
បង្កើត
const agent = new HttpsProxyAgent('http://user:pass@ip:port');ដោយប្រើតម្លៃពីការបញ្ជាទិញ ProxyV4 របស់អ្នក។ - 3
ផ្ញើសំណើតាមរយៈវា
ហៅ
const res = await axios.get('https://proxyv4.com/api/my-ip', { httpsAgent: agent, proxy: false, timeout: 10000 });។ - 4
ប្រៀបធៀប IP
console.log(res.data)គួរតែបង្ហាញ proxy IP។ ប្រសិនបើវាបង្ហាញអាសយដ្ឋានផ្ទាល់ខ្លួនរបស់ម៉ាស៊ីនមេអ្នក មានន័យថា agent មិនត្រូវបានអនុវត្តទេ។
សំណួរដែលសួរញឹកញាប់
ហេតុអ្វីបានជា proxy: { host, port, auth } របស់ Axios បរាជ័យលើគេហទំព័រ HTTPS?
ជម្រើសនោះផ្ញើសំណើ HTTP ធម្មតាទៅកាន់ប្រូកស៊ី ជាជាងការស្នើសុំ tunnel HTTP CONNECT ជាមុន ដូច្នេះ TLS ទៅកាន់គោលដៅមិនដែលត្រូវបានដំឡើងត្រឹមត្រូវឡើយ។ ប្រើ httpsAgent: new HttpsProxyAgent('http://user:pass@ip:port') និងកំណត់ proxy: false។
តើខ្ញុំអាចបន្ថែមប្រូកស៊ីទៅកាន់ native fetch() ក្នុង Node 18, 20 ឬ 22 ដោយរបៀបណា?
fetch របស់ Node ដំណើរការលើ undici ដូច្នេះត្រូវ import ProxyAgent ពី undici ហើយបញ្ជូន { dispatcher: new ProxyAgent('http://user:pass@ip:port') } ជាផ្នែកមួយនៃជម្រើស fetch()។
ពាក្យសម្ងាត់របស់ខ្ញុំមាន @ ឬ :។ តើ URL នឹងខូចដែរឬទេ?
វាអាចខូច ពីព្រោះតួអក្សរទាំងនោះមានអត្ថន័យពិសេសនៅក្នុង URL។ ធ្វើ percent-encode ពាក្យសម្ងាត់ជាមួយ encodeURIComponent(password) មុនពេលអ្នកបង្កើត http://user:pass@ip:port។
សំណើត្រឡប់កូដ 407។ តើមានបញ្ហាអ្វី?
ប្រូកស៊ីបានឆ្លើយតប ប៉ុន្តែបានបដិសេធការចូលប្រើ។ ពិនិត្យឈ្មោះអ្នកប្រើប្រាស់ និងពាក្យសម្ងាត់ពីការបញ្ជាទិញរបស់អ្នកឡើងវិញ។ ទំព័រដោះស្រាយបញ្ហា 407 មានរាយបញ្ជីមូលហេតុទូទៅ។
ប្រភព
IPv4 ថេរសម្រាប់ Node.js worker របស់អ្នក
IPv4 ឯកជនក្នុង 7 ប្រទេស រួមជាមួយ ISP ថេរនៅសហរដ្ឋអាមេរិក និងវៀតណាម មិនកំណត់ទំហំប្រើប្រាស់ អតិថិជនម្នាក់ក្នុងមួយ IP។ ទិញមួយ ឬច្រើន។
ពិនិត្យតម្លៃផ្ទាល់នៅសហរដ្ឋអាមេរិក