Puppeteer s autentizovanou proxy: spouštěcí parametr a přihlášení
Od inženýrského týmu ProxyV4 · Updated:
Autentizace proxy v Puppeteer probíhá na dvou místech: adresa proxy patří do spouštěcího parametru --proxy-server=http://ip:port a uživatelské jméno s heslem do await page.authenticate({ username, password }). Chrome na výzvu 407 z proxy odpoví těmito údaji přes DevTools Protocol, takže váš Node.js skript může používat IP od ProxyV4 bez rozšíření prohlížeče.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 US$
- 3+ IP1,70 US$
- 10+ IP1,60 US$
- 25+ IP1,50 US$
- 50+ IP1,40 US$
- 100+ IP1,30 US$
- 200+ IP1,20 US$
- 500+ IP1,10 US$
- 1 IP1,85 US$
- 3+ IP1,70 US$
- 10+ IP1,60 US$
- 25+ IP1,50 US$
- 50+ IP1,40 US$
- 100+ IP1,30 US$
- 200+ IP1,20 US$
- 500+ IP1,10 US$
Autentizace proxy v Puppeteeru: kompletní příklad
Před první navigací předejte adresu proxy v parametru --proxy-server a přihlašovací údaje přes page.authenticate(). Tento skript přesně to provádí a vypíše výstupní IP adresu, takže funkčnost proxy ověříte na jedno spuštění:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Výstup by měl zobrazit stav 200 a IP adresu proxy. Stav 407, chyba ERR_TUNNEL_CONNECTION_FAILED nebo vaše vlastní IP adresa znamenají, že jedna ze dvou částí chybí; článek nefunkční proxy uvádí obvyklé příčiny pro jednotlivé nástroje.
Proč přihlašovací údaje nejsou součástí parametru
Chrome nepřijímá přihlašovací údaje uvnitř parametru --proxy-server. Pokud zadáte --proxy-server=http://user:pass@ip:port, prohlížeč tuto hodnotu nedokáže zpracovat a požadavky selžou, obvykle s chybou ERR_NO_SUPPORTED_PROXIES. Ponechte v parametru pouze adresu a port a přihlášení předejte samotné stránce.
| Pořadí | Volání | Co dělá |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Určuje Chromu, jakou proxy má použít pro každý požadavek |
| 2 | await page.authenticate({ username, password }) | Předá přihlašovací údaje, když proxy odpoví kódem 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Načte cílovou stránku přes ověřenou proxy |
Záložky, kontexty a více než jedna IP adresa
page.authenticate()se nastavuje pro každou stránku: každá záložka vytvořená přesbrowser.newPage()vyžaduje vlastní volání před prvnímgoto()- Spouštěcí parametr nastavuje jednu proxy pro celý prohlížeč. Pokud chcete v jednom procesu Chromu odlišnou IP pro každý kontext, předejte jednotlivé
http://user:pass@ip:portdo funkceanonymizeProxy()z balíčkuproxy-chaina výsledek zadejte jakoproxyServerdobrowser.createBrowserContext({ proxyServer }) - Nastavení funguje stejně i s balíčky
puppeteer-extraapuppeteer-extra-plugin-stealth - Vždy ukončujte běh pomocí
browser.close(), a to i v případě chyb, jinak se na serveru budou hromadit headless procesy Chromu
Puppeteer se SOCKS5 proxy
Chrome sice dokáže používat SOCKS5 proxy (--proxy-server=socks5://IP:PORT), ale nepodporuje přihlášení k ní, a metoda page.authenticate() se na SOCKS nevztahuje. S proxy od ProxyV4 (protokol SOCKS5 nabízíme mimo Vietnam; vietnamské IP adresy podporují pouze HTTP) máte dvě čistá řešení: přepněte objednávku na HTTP či duální režim a použijte výše uvedený příklad, nebo nechte balíček proxy-chain vytvořit lokální přesměrování bez hesla, které přihlášení provede za vás:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Třetí možností je autorizace přes IP whitelist: přidejte veřejnou IP adresu daného stroje do objednávky a Chrome se připojí bez zadávání přihlašovacích údajů.
Výběr IP adres pro provoz Puppeteeru
Headless Chrome stahuje celé stránky, skripty i obrázky, takže účtovaný přenos dat rychle narůstá. Privátní IPv4 a statické ISP proxy od ProxyV4 nemají žádné datové limity, každá IP adresa slouží vždy jen jednomu zákazníkovi a při prodloužení vám zůstává stejná adresa, což je klíčové, pokud je na ni vázána relace nebo whitelist. Porovnejte privátní IPv4 proxy se statickými ISP proxy, pokud cílový web přistupuje k datacentrovým rozsahům jinak.
Krok za krokem
- 1
Spuštění Chrome s adresou proxy
Spusťte prohlížeč pomocí
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });s využitím IP adresy a portu z vaší objednávky u ProxyV4. - 2
Autentizace záložky
Otevřete stránku pomocí
const page = await browser.newPage();a před jakoukoli navigací zavolejteawait page.authenticate({ username: 'USER', password: 'PASS' });. - 3
Ověření výstupní IP adresy
Přejděte na adresu pomocí
await page.goto('https://proxyv4.com/api/my-ip');a zkontrolujte, zda odpověď zobrazuje adresu proxy. - 4
Ukončení prohlížeče
Ukončete běh voláním
await browser.close();, aby na pozadí nezůstal běžet žádný proces Chrome.
Často kladené otázky
Co způsobuje chybu ERR_NO_SUPPORTED_PROXIES v Puppeteeru?
Přihlašovací údaje zadané přímo v parametru, například --proxy-server=http://user:pass@ip:port. Použijte --proxy-server=http://ip:port a uživatelské jméno s heslem předejte přes page.authenticate().
První záložka funguje, ale nová vrací HTTP 407. Proč?
Autentizace se ukládá pro každou stránku zvlášť. Zavolejte await newTab.authenticate({ username, password }) pro každou otevřenou stránku ještě před zahájením navigace.
Může jeden prohlížeč v Puppeteeru používat více proxy současně?
Pouze pomocí spouštěcího parametru ne. Využijte balíček proxy-chain, který převede každou ověřenou proxy na lokální adresu, a každému kontextu prohlížeče přiřaďte vlastní proxyServer, případně spusťte pro každou proxy samostatný prohlížeč.
Jak otestovat větší množství proxy před jejich předáním do Puppeteeru?
Vložte je do ověřovače proxy; zvládne až 100 adres najednou a neukládá hesla.
Proč page.authenticate() nefunguje s mou SOCKS5 proxy?
Chrome nepodporuje přihlášení uživatelským jménem a heslem pro SOCKS5, takže Puppeteer nemá na co odpovědět. Přepněte objednávku do režimu HTTP, použijte lokální přesměrování přes proxy-chain, nebo přihlašování přes povolené IP adresy (whitelist).
Zdroje
Neomezené IP adresy pro headless Chrome
Privátní IPv4 v 7 zemích a statické ISP v USA a Vietnamu, přidělené automaticky po platbě, jedna IP na zákazníka.
Zobrazit aktuální ceny pro USA