Puppeteer ກັບພຣັອກຊີທີ່ຕ້ອງຢືນຢັນຕົວຕົນ: launch flag ບວກກັບການເຂົ້າສູ່ລະບົບ
ໂດຍ ທີມງານວິສະວະກຳ ProxyV4 · Updated:
ການຢືນຢັນຕົວຕົນພຣັອກຊີໃນ Puppeteer ເກີດຂຶ້ນໃນສອງບ່ອນ: ທີ່ຢູ່ພຣັອກຊີຈະໃສ່ໃນ launch flag --proxy-server=http://ip:port, ແລະ ຊື່ຜູ້ໃຊ້ພ້ອມລະຫັດຜ່ານຈະໃສ່ໃນ await page.authenticate({ username, password }). Chrome ຈະຕອບສະໜອງຄຳຂໍ 407 ຂອງພຣັອກຊີດ້ວຍຂໍ້ມູນປະຈຳຕົວເຫຼົ່ານັ້ນຜ່ານ DevTools Protocol, ເຮັດໃຫ້ສະຄຣິບ Node.js ຂອງທ່ານສາມາດໃຊ້ IP ຂອງ ProxyV4 ໄດ້ໂດຍບໍ່ຕ້ອງມີ browser extension.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IPUS$1,85
- 3+ IPUS$1,70
- 10+ IPUS$1,60
- 25+ IPUS$1,50
- 50+ IPUS$1,40
- 100+ IPUS$1,30
- 200+ IPUS$1,20
- 500+ IPUS$1,10
- 1 IPUS$1,85
- 3+ IPUS$1,70
- 10+ IPUS$1,60
- 25+ IPUS$1,50
- 50+ IPUS$1,40
- 100+ IPUS$1,30
- 200+ IPUS$1,20
- 500+ IPUS$1,10
ການຢືນຢັນຕົວຕົນພຣັອກຊີໃນ Puppeteer: ຕົວຢ່າງແບບຄົບຖ້ວນ
ສົ່ງທີ່ຢູ່ພຣັອກຊີໃນ --proxy-server ແລະ ສົ່ງຂໍ້ມູນເຂົ້າສູ່ລະບົບຜ່ານ page.authenticate() ກ່ອນການ navigate ຄັ້ງທຳອິດ. ສະຄຣິບນີ້ເຮັດວຽກຕາມນັ້ນ ແລະ ສະແດງ IP ຂາອອກ, ເພື່ອໃຫ້ທ່ານສາມາດຢືນຢັນພຣັອກຊີໄດ້ພາຍໃນການຮັນຄັ້ງດຽວ:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();ຜົນອອກຄວນສະແດງສະຖານະ 200 ແລະ IP ຂອງພຣັອກຊີ. ຖ້າຂຶ້ນ 407, ERR_TUNNEL_CONNECTION_FAILED ຫຼື ເປັນ IP ຂອງທ່ານເອງ ສະແດງວ່າມີສ່ວນໃດສ່ວນໜຶ່ງຂາດຫາຍໄປ; proxy not working ໄດ້ຮວບຮວມສາເຫດທົ່ວໄປຕາມແຕ່ລະເຄື່ອງມືໄວ້ແລ້ວ.
ເປັນຫຍັງຂໍ້ມູນເຂົ້າສູ່ລະບົບຈຶ່ງບໍ່ໄດ້ເປັນສ່ວນໜຶ່ງຂອງ flag
Chrome ບໍ່ຮອງຮັບຂໍ້ມູນເຂົ້າສູ່ລະບົບພາຍໃນ --proxy-server. ຖ້າທ່ານຂຽນ --proxy-server=http://user:pass@ip:port, ບຣາວເຊີຈະບໍ່ສາມາດນຳໃຊ້ຄ່ານັ້ນໄດ້ ແລະ ຄຳຂໍຈະລົ້ມເຫຼວ, ໂດຍທົ່ວໄປແມ່ນຈະຂຶ້ນ ERR_NO_SUPPORTED_PROXIES. ໃຫ້ໃສ່ສະເພາະທີ່ຢູ່ ແລະ ພອດໃນ flag, ແລ້ວສົ່ງຂໍ້ມູນເຂົ້າສູ່ລະບົບໃຫ້ກັບໜ້າເວັບແທນ.
| ລຳດັບ | ຄຳສັ່ງ | ການເຮັດວຽກ |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | ບອກ Chrome ວ່າທຸກຄຳຂໍຄວນໃຊ້ພຣັອກຊີໃດ |
| 2 | await page.authenticate({ username, password }) | ສົ່ງຂໍ້ມູນເຂົ້າສູ່ລະບົບເມື່ອພຣັອກຊີຕອບກັບ 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | ໂຫຼດປາຍທາງຜ່ານພຣັອກຊີທີ່ໄດ້ຢືນຢັນຕົວຕົນແລ້ວ |
ແຖບ, contexts ແລະ ການໃຊ້ຫຼາຍກວ່າໜຶ່ງ IP
page.authenticate()ຖືກຕັ້ງຄ່າແຍກຕາມແຕ່ລະໜ້າ: ທຸກແຖບຈາກbrowser.newPage()ຕ້ອງມີການຮຽກໃຊ້ຂອງຕົນເອງກ່ອນgoto()ຄັ້ງທຳອິດ- launch flag ຈະກຳນົດພຣັອກຊີດຽວສຳລັບທັງບຣາວເຊີ. ສຳລັບ IP ທີ່ຕ່າງກັນຕໍ່ context ໃນ process ດຽວຂອງ Chrome, ໃຫ້ຮັນແຕ່ລະ
http://user:pass@ip:portຜ່ານanonymizeProxy()ຈາກແພັກເກດproxy-chainແລ້ວສົ່ງຜົນໄດ້ຮັບເປັນproxyServerໄປທີ່browser.createBrowserContext({ proxyServer }) - ການຕັ້ງຄ່ານີ້ເຮັດວຽກຄືກັນກັບ
puppeteer-extraແລະpuppeteer-extra-plugin-stealth - ໃຫ້ປິດທ້າຍດ້ວຍ
browser.close()ສະເໝີ, ລວມທັງໃນກໍລະນີທີ່ເກີດຂໍ້ຜິດພາດ, ບໍ່ດັ່ງນັ້ນ process ຂອງ headless Chrome ຈະສະສົມຄ້າງຢູ່ໃນເຊີບເວີ
Puppeteer ກັບພຣັອກຊີ SOCKS5
Chrome ສາມາດໃຊ້ພຣັອກຊີ SOCKS5 ໄດ້ (--proxy-server=socks5://IP:PORT) ແຕ່ບໍ່ສາມາດເຂົ້າສູ່ລະບົບໄດ້, ແລະ page.authenticate() ບໍ່ສາມາດໃຊ້ກັບ SOCKS ໄດ້. ສຳລັບພຣັອກຊີ ProxyV4 (ມີບໍລິການ SOCKS5 ຢູ່ນອກປະເທດຫວຽດນາມ; ສ່ວນ IP ຫວຽດນາມ ແມ່ນຮອງຮັບສະເພາະ HTTP ເທົ່ານັ້ນ) ທ່ານມີສອງທາງເລືອກທີ່ດີ: ປ່ຽນຄຳສັ່ງຊື້ເປັນໂໝດ HTTP ຫຼື ໂໝດ dual ແລ້ວໃຊ້ຕົວຢ່າງຂ້າງເທິງ, ຫຼື ໃຫ້ proxy-chain ເປີດຕົວ forwarder ພາຍໃນເຄື່ອງທີ່ບໍ່ຕ້ອງໃຊ້ລະຫັດຜ່ານ ເຊິ່ງຈະເຂົ້າສູ່ລະບົບໃຫ້ທ່ານໂດຍອັດຕະໂນມັດ:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);ການເຂົ້າສູ່ລະບົບດ້ວຍ IP whitelist ເປັນວິທີທີສາມ: ເພີ່ມ IP ສາທາລະນະຂອງເຄື່ອງເຂົ້າໃນຄຳສັ່ງຊື້ ແລ້ວ Chrome ຈະເຊື່ອມຕໍ່ໂດຍບໍ່ຕ້ອງໃຊ້ຂໍ້ມູນເຂົ້າສູ່ລະບົບໃດໆ.
ການເລືອກ IP ສຳລັບລະບົບ Puppeteer fleet
Headless Chrome ດາວໂຫຼດທັງໜ້າເວັບ, ສະຄຣິບ ແລະ ຮູບພາບ, ເຮັດໃຫ້ປະລິມານການນຳໃຊ້ຂໍ້ມູນເພີ່ມຂຶ້ນຢ່າງວ່ອງໄວ. ພຣັອກຊີ private IPv4 ແລະ static ISP ຂອງ ProxyV4 ບໍ່ມີການຈຳກັດ bandwidth, ແຕ່ລະ IP ໃຫ້ບໍລິການລູກຄ້າພຽງຄົນດຽວເທົ່ານັ້ນ, ແລະ ການຕໍ່ອາຍຸຈະຮັກສາທີ່ຢູ່ IP ເດີມໄວ້, ເຊິ່ງສຳຄັນຫຼາຍເມື່ອມີເຊດຊັນ ຫຼື allow-list ຜູກຕິດຢູ່ກັບ IP ນັ້ນ. ປຽບທຽບ private IPv4 product ກັບ static ISP product ຖ້າເວັບໄຊປາຍທາງມີການປະຕິບັດຕໍ່ຊ່ວງ IP ຂອງ datacenter ທີ່ແຕກຕ່າງກັນ.
ຂັ້ນຕອນແຕ່ລະບາດກ້າວ
- 1
ເປີດໃຊ້ Chrome ພ້ອມທີ່ຢູ່ພຣັອກຊີ
ເລີ່ມຕົ້ນບຣາວເຊີດ້ວຍ
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });, ໂດຍໃຊ້ IP ແລະ ພອດຈາກຄຳສັ່ງຊື້ ProxyV4 ຂອງທ່ານ. - 2
ຢືນຢັນຕົວຕົນໃນແທັບ
ເປີດໜ້າເວັບດ້ວຍ
const page = await browser.newPage();ແລະ ຮຽກໃຊ້await page.authenticate({ username: 'USER', password: 'PASS' });ກ່ອນການນຳທາງໃດໆ. - 3
ກວດສອບ IP ປາຍທາງ
ນຳທາງດ້ວຍ
await page.goto('https://proxyv4.com/api/my-ip');ແລະ ກວດສອບວ່າຜົນຕອບກັບສະແດງທີ່ຢູ່ພຣັອກຊີ. - 4
ປິດບຣາວເຊີ
ສິ້ນສຸດດ້ວຍ
await browser.close();ເພື່ອບໍ່ໃຫ້ມີໂປຣເຊສ Chrome ຄ້າງຢູ່.
ຄຳຖາມທີ່ຖາມເລື້ອຍໆ
ສາເຫດທີ່ພາໃຫ້ເກີດ ERR_NO_SUPPORTED_PROXIES ໃນ Puppeteer ແມ່ນຫຍັງ?
ເກີດຈາກການໃສ່ຂໍ້ມູນເຂົ້າສູ່ລະບົບໄວ້ພາຍໃນ flag ເຊັ່ນ: --proxy-server=http://user:pass@ip:port. ໃຫ້ໃຊ້ --proxy-server=http://ip:port ແລ້ວສົ່ງຊື່ຜູ້ໃຊ້ ແລະ ລະຫັດຜ່ານຜ່ານ page.authenticate() ແທນ.
ແຖບທຳອິດໃຊ້ງານໄດ້ ແຕ່ແຖບໃໝ່ກັບຕິດ HTTP 407 ຍ້ອນຫຍັງ?
ການຢືນຢັນຕົວຕົນຈະຖືກບັນທຶກແຍກຕາມແຕ່ລະໜ້າ. ໃຫ້ຮຽກໃຊ້ await newTab.authenticate({ username, password }) ໃນທຸກໜ້າທີ່ທ່ານເປີດກ່ອນທີ່ມັນຈະ navigate.
ບຣາວເຊີ Puppeteer ໜຶ່ງຕົວສາມາດໃຊ້ຫຼາຍພຣັອກຊີພ້ອມກັນໄດ້ບໍ່?
ບໍ່ສາມາດເຮັດໄດ້ຜ່ານ launch flag ພຽງຢ່າງດຽວ. ໃຫ້ໃຊ້ proxy-chain ເພື່ອປ່ຽນແຕ່ລະພຣັອກຊີທີ່ມີການຢືນຢັນຕົວຕົນໃຫ້ເປັນທີ່ຢູ່ local ແລະ ກຳນົດ proxyServer ໃຫ້ແຕ່ລະ browser context ແຍກກັນ, ຫຼື ເປີດບຣາວເຊີໜຶ່ງຕົວຕໍ່ໜຶ່ງພຣັອກຊີ.
ຂ້ອຍຈະທົດສອບພຣັອກຊີຫຼາຍໆຕົວແນວໃດກ່ອນທີ່ຈະເອົາໄປໃຊ້ກັບ Puppeteer?
ວາງພວກມັນລົງໃນ proxy checker; ລະບົບຮອງຮັບໄດ້ສູງສຸດ 100 ຕົວຕໍ່ຄັ້ງ ແລະ ບໍ່ມີການບັນທຶກລະຫັດຜ່ານ.
ເປັນຫຍັງ page.authenticate() ຈຶ່ງບໍ່ເຮັດວຽກກັບພຣັອກຊີ SOCKS5 ຂອງຂ້ອຍ?
Chrome ບໍ່ຮອງຮັບການເຂົ້າສູ່ລະບົບດ້ວຍຊື່ຜູ້ໃຊ້ ແລະ ລະຫັດຜ່ານສຳລັບ SOCKS5, ດັ່ງນັ້ນ Puppeteer ຈຶ່ງບໍ່ມີຫຍັງໃຫ້ຕອບກັບ. ໃຫ້ໃຊ້ໂໝດ HTTP ຂອງຄຳສັ່ງຊື້, ຕົວ forwarder ພາຍໃນເຄື່ອງຈາກ proxy-chain, ຫຼື ການເຂົ້າສູ່ລະບົບດ້ວຍ IP whitelist ແທນ.
ແຫຼ່ງຂໍ້ມູນ
IP ບໍ່ຈຳກັດປະລິມານສຳລັບ headless Chrome
Private IPv4 ໃນ 7 ປະເທດ ພ້ອມກັບ static ISP ໃນ US ແລະ Vietnam, ຈັດສົ່ງອັດຕະໂນມັດຫຼັງຊຳລະເງິນ, ລູກຄ້າໜຶ່ງຄົນຕໍ່ໜຶ່ງ IP.
ກວດເບິ່ງລາຄາ US ຫຼ້າສຸດ