Puppeteer s overenou proxy: spúšťací príznak a prihlásenie
Od inžinierskeho tímu ProxyV4 · Updated:
Autentifikácia proxy v Puppeteer prebieha na dvoch miestach: adresa proxy patrí do spúšťacieho príznaku --proxy-server=http://ip:port a používateľské meno s heslom do await page.authenticate({ username, password }). Chrome na výzvu proxy 407 odpovedá týmito prihlasovacími údajmi cez DevTools Protocol, takže váš Node.js skript môže používať IP od ProxyV4 bez rozšírenia prehliadača.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
Autentifikácia proxy v Puppeteer: kompletný príklad
Zadajte adresu proxy do --proxy-server a prihlasovacie údaje odovzdajte cez page.authenticate() ešte pred prvou navigáciou. Tento skript robí presne to a vypíše výstupnú IP adresu, takže funkčnosť proxy overíte na jedno spustenie:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Výstup by mal zobraziť stav 200 a IP adresu danej proxy. Stav 407, ERR_TUNNEL_CONNECTION_FAILED alebo vaša vlastná IP adresa znamená, že chýba jedna z dvoch častí; sprievodca proxy not working uvádza obvyklé príčiny pre jednotlivé nástroje.
Prečo prihlasovacie údaje nie sú súčasťou prepínača
Chrome neakceptuje prihlasovacie údaje vo vnútri --proxy-server. Ak zadáte --proxy-server=http://user:pass@ip:port, prehliadač túto hodnotu nedokáže spracovať a požiadavky zlyhajú, zvyčajne s chybou ERR_NO_SUPPORTED_PROXIES. Ponechajte v prepínači iba adresu a port a prihlásenie odovzdajte samotnej stránke.
| Poradie | Volanie | Čo robí |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Povie prehliadaču Chrome, akú proxy má použiť každá požiadavka |
| 2 | await page.authenticate({ username, password }) | Poskytne prihlasovacie údaje, keď proxy odpovie kódom 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Načíta cieľ cez overenú proxy |
Karty, kontexty a viacero IP adries
page.authenticate()sa nastavuje pre každú stránku zvlášť: každá karta zbrowser.newPage()potrebuje vlastné volanie pred prvýmgoto()- Spúšťací prepínač nastavuje jednu proxy pre celý prehliadač. Ak chcete inú IP adresu pre každý kontext v rámci jedného procesu Chrome, preveďte každú adresu
http://user:pass@ip:portpomocouanonymizeProxy()z balíčkaproxy-chaina odovzdajte výsledok akoproxyServerdobrowser.createBrowserContext({ proxyServer }) - Nastavenie funguje rovnako aj s
puppeteer-extraapuppeteer-extra-plugin-stealth - Vždy ukončite beh volaním
browser.close(), a to aj v prípade chýb, inak sa na serveri budú hromadiť procesy headless Chrome
Puppeteer so SOCKS5 proxy
Chrome dokáže používať SOCKS5 proxy (--proxy-server=socks5://IP:PORT), ale nedokáže sa do nej prihlásiť a page.authenticate() sa na SOCKS nevzťahuje. S proxy od ProxyV4 (SOCKS5 je v ponuke mimo Vietnamu; vietnamské IP adresy sú len HTTP) máte dve čisté možnosti: prepnite objednávku na HTTP alebo duálny režim a použite vyššie uvedený príklad, alebo nechajte proxy-chain otvoriť lokálny forwarder bez hesla, ktorý sa prihlási za vás:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Treťou možnosťou je prihlásenie cez whitelist IP adries: pridajte verejnú IP adresu zariadenia do objednávky a Chrome sa pripojí bez akýchkoľvek prihlasovacích údajov.
Výber IP adries pre flotilu Puppeteer
Headless Chrome sťahuje celé stránky, skripty aj obrázky, takže meraný prenos dát sa rýchlo navyšuje. Privátne IPv4 a statické ISP proxy od ProxyV4 nemajú meraný prenos dát, každá IP adresa slúži len jednému zákazníkovi a pri predĺžení zostáva adresa rovnaká, čo je dôležité, ak je na ňu naviazaná relácia alebo allow-list. Porovnajte produkt privátnych IPv4 s produktom statických ISP, ak cieľová stránka pristupuje k rozsahom dátových centier inak.
Krok za krokom
- 1
Spustite Chrome s adresou proxy
Spustite prehliadač pomocou
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });s použitím IP a portu z vašej objednávky u ProxyV4. - 2
Overte kartu
Otvorte stránku pomocou
const page = await browser.newPage();a pred navigáciou zavolajteawait page.authenticate({ username: 'USER', password: 'PASS' });. - 3
Skontrolujte výstupnú IP
Prejdite na stránku pomocou
await page.goto('https://proxyv4.com/api/my-ip');a overte, či odpoveď zobrazuje adresu vašej proxy. - 4
Ukončite prehliadač
Zakončite beh skriptu pomocou
await browser.close();, aby na pozadí nezostal bežať žiadny proces Chrome.
Často kladené otázky
Čo spôsobuje ERR_NO_SUPPORTED_PROXIES v Puppeteer?
Prihlasovacie údaje priamo vo vlajke, ako napríklad v --proxy-server=http://user:pass@ip:port. Použite --proxy-server=http://ip:port a používateľské meno s heslom odovzdajte cez page.authenticate().
Moja prvá karta funguje, ale nová karta vracia HTTP 407. Prečo?
Autentifikácia sa ukladá pre každú stránku zvlášť. Pred začatím navigácie zavolajte await newTab.authenticate({ username, password }) na každej novej otvorenej stránke.
Môže jeden prehliadač v Puppeteer používať viacero proxy súčasne?
Nie iba pomocou spúšťacieho prepínača. Použite proxy-chain, aby ste každú overenú proxy previedli na lokálnu adresu a priraďte každému kontextu prehliadača vlastný proxyServer, alebo spustite samostatný prehliadač pre každú proxy.
Ako otestujem viacero proxy pred ich použitím v Puppeteer?
Vložte ich do nástroja proxy checker; zvládne až 100 adries naraz a neukladá heslá.
Prečo page.authenticate() nefunguje s mojou SOCKS5 proxy?
Chrome nepodporuje prihlásenie pomocou mena a hesla pre SOCKS5, takže Puppeteer nemá na čo odpovedať. Použite HTTP režim objednávky, lokálny forwarder z balíčka proxy-chain alebo prihlásenie cez whitelist IP adries.
Zdroje
Nemerané IP pre headless Chrome
Privátne IPv4 v 7 krajinách a statické ISP v USA a Vietname, pridelené automaticky po platbe, jedna IP na zákazníka.
Zobraziť aktuálne ceny v USA