Puppeteer med en godkendt proxy: startflag plus login
Af ProxyV4s ingeniørteam · Updated:
Proxygodkendelse i Puppeteer sker to steder: Proxyadressen angives i startflaget --proxy-server=http://ip:port, og brugernavn samt adgangskode angives i await page.authenticate({ username, password }). Chrome besvarer proxyens 407-udfordring med disse loginoplysninger via DevTools Protocol, så dit Node.js-script kan bruge en ProxyV4-IP uden en browserudvidelse.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 US$
- 3+ IP'er1,70 US$
- 10+ IP'er1,60 US$
- 25+ IP'er1,50 US$
- 50+ IP'er1,40 US$
- 100+ IP'er1,30 US$
- 200+ IP'er1,20 US$
- 500+ IP'er1,10 US$
- 1 IP1,85 US$
- 3+ IP'er1,70 US$
- 10+ IP'er1,60 US$
- 25+ IP'er1,50 US$
- 50+ IP'er1,40 US$
- 100+ IP'er1,30 US$
- 200+ IP'er1,20 US$
- 500+ IP'er1,10 US$
Puppeteer-proxygodkendelse: et komplet eksempel
Angiv proxyadressen i --proxy-server og login via page.authenticate() før den første navigering. Dette script gør netop det og udskriver udgangs-IP'en, så du kan bekræfte proxyen i én kørsel:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Outputtet bør vise status 200 og proxyens IP. En 407, ERR_TUNNEL_CONNECTION_FAILED eller din egen IP betyder, at en af de to halvdele mangler; proxy virker ikke oplister de typiske årsager pr. værktøj.
Hvorfor login ikke er en del af parameteren
Chrome accepterer ikke loginoplysninger inde i --proxy-server. Hvis du skriver --proxy-server=http://user:pass@ip:port, kan browseren ikke bruge værdien, og anmodninger mislykkes, typisk med ERR_NO_SUPPORTED_PROXIES. Hold parameteren til adresse og port, og overlad login til siden.
| Rækkefølge | Kald | Hvad det gør |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Fortæller Chrome, hvilken proxy enhver anmodning skal bruge |
| 2 | await page.authenticate({ username, password }) | Leverer loginoplysningerne, når proxyen svarer 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Indlæser målet gennem den godkendte proxy |
Faner, kontekster og mere end én IP
page.authenticate()indstilles pr. side: hver fane frabrowser.newPage()kræver sit eget kald før det førstegoto()- Startparameteren fastlåser én proxy for hele browseren. Hvis du ønsker en anden IP pr. kontekst i én Chrome-proces, køres hver
http://user:pass@ip:portgennemanonymizeProxy()fra pakkenproxy-chain, og resultatet videregives somproxyServertilbrowser.createBrowserContext({ proxyServer }) - Opsætningen fungerer på samme måde med
puppeteer-extraogpuppeteer-extra-plugin-stealth - Afslut altid med
browser.close(), herunder ved fejl, ellers ophobes der headless Chrome-processer på serveren
Puppeteer med en SOCKS5-proxy
Chrome kan bruge en SOCKS5-proxy (--proxy-server=socks5://IP:PORT), men kan ikke logge ind på den, og page.authenticate() gælder ikke for SOCKS. Med en ProxyV4-proxy (SOCKS5 tilbydes uden for Vietnam; Vietnam-IP'er er kun HTTP) har du to gode muligheder: Skift ordren til HTTP- eller dual-tilstand og brug eksemplet ovenfor, eller lad proxy-chain åbne en lokal forwarder uden adgangskode, der logger ind for dig:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Login via IP-whitelist er en tredje mulighed: Føj maskinens offentlige IP til ordren, hvorefter Chrome opretter forbindelse helt uden loginoplysninger.
Valg af IP'er til en Puppeteer-flåde
Headless Chrome downloader komplette sider, scripts og billeder, så forbrugsafregnet trafik løber hurtigt op. ProxyV4 private IPv4- og statiske ISP-proxyer har ingen måling af forbrug, hver IP betjener kun én kunde, og fornyelse bevarer den samme adresse, hvilket er vigtigt, når en session eller allowlist er knyttet til den. Sammenlign det private IPv4-produkt med det statiske ISP-produkt, hvis målwebstedet behandler datacenterintervaller anderledes.
Trin for trin
- 1
Start Chrome med proxyadressen
Start browseren med
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });ved hjælp af IP og port fra din ProxyV4-ordre. - 2
Godkend fanen
Åbn en side med
const page = await browser.newPage();, og kaldawait page.authenticate({ username: 'USER', password: 'PASS' });før enhver navigation. - 3
Aflæs udgangs-IP'en
Naviger med
await page.goto('https://proxyv4.com/api/my-ip');, og kontrollér, at svaret viser proxyadressen. - 4
Luk browseren ned
Afslut med
await browser.close();, så ingen Chrome-proces efterlades kørende.
Ofte stillede spørgsmål
Hvad forårsager ERR_NO_SUPPORTED_PROXIES i Puppeteer?
Loginoplysninger inde i parameteren, som i --proxy-server=http://user:pass@ip:port. Brug --proxy-server=http://ip:port, og videregiv brugernavn og adgangskode via page.authenticate().
Min første fane virker, men en ny fane får HTTP 407. Hvorfor?
Godkendelse gemmes pr. side. Kald await newTab.authenticate({ username, password }) på hver side, du åbner, før den navigerer.
Kan én Puppeteer-browser bruge flere proxyer samtidig?
Ikke via startparameteren alene. Brug proxy-chain til at omdanne hver godkendt proxy til en lokal adresse og tildele hver browserkontekst sin egen proxyServer, eller start én browser pr. proxy.
Hvordan tester jeg mange proxyer, før jeg giver dem til Puppeteer?
Indsæt dem i proxy-tjekkeren; den håndterer op til 100 ad gangen og gemmer ikke adgangskoder.
Hvorfor virker page.authenticate() ikke med min SOCKS5-proxy?
Chrome understøtter ikke login med brugernavn og adgangskode til SOCKS5, så der er intet, Puppeteer kan besvare. Brug ordrens HTTP-tilstand, en lokal forwarder fra proxy-chain eller login via IP-whitelist.
Kilder
Ubegrænsede IP'er til headless Chrome
Privat IPv4 i 7 lande plus statisk ISP i USA og Vietnam, udstedes automatisk efter betaling, én kunde pr. IP.
Se aktuelle US-priser