Puppeteer z uwierzytelnianym proxy: flaga startowa i logowanie
Autor: Zespół inżynierski ProxyV4 · Updated:
Uwierzytelnianie proxy w Puppeteer odbywa się w dwóch miejscach: adres proxy trafia do flagi startowej --proxy-server=http://ip:port, a nazwa użytkownika i hasło do await page.authenticate({ username, password }). Chrome odpowiada na żądanie 407 proxy tymi danymi logowania przez DevTools Protocol, dzięki czemu Twój skrypt Node.js może korzystać z adresu IP od ProxyV4 bez rozszerzenia przeglądarki.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
Uwierzytelnianie proxy w Puppeteer: kompletny przykład
Przekaż adres proxy w parametrze --proxy-server, a dane logowania przez page.authenticate() przed pierwszym przejściem na stronę. Ten skrypt robi dokładnie to i wyświetla wyjściowy adres IP, co pozwala potwierdzić działanie proxy w jednym uruchomieniu:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();W odpowiedzi powinien pojawić się status 200 oraz adres IP serwera proxy. Status 407, ERR_TUNNEL_CONNECTION_FAILED lub Twój własny adres IP oznacza brak jednego z dwóch elementów; artykuł proxy nie działa zawiera zestawienie typowych przyczyn dla poszczególnych narzędzi.
Dlaczego dane logowania nie są częścią flagi
Przeglądarka Chrome nie akceptuje danych logowania wewnątrz flagi --proxy-server. Jeśli wpiszesz --proxy-server=http://user:pass@ip:port, przeglądarka nie zdoła przetworzyć tej wartości, a żądania zakończą się błędem, zazwyczaj ERR_NO_SUPPORTED_PROXIES. Ogranicz flagę do adresu i portu, a dane logowania przekaż bezpośrednio do strony.
| Kolejność | Wywołanie | Działanie |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Informuje Chrome, z jakiego proxy powinno korzystać każde żądanie |
| 2 | await page.authenticate({ username, password }) | Przekazuje dane logowania, gdy serwer proxy odpowie kodem 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Wczytuje stronę docelową przez uwierzytelnione proxy |
Karty, konteksty i wiele adresów IP
page.authenticate()konfiguruje się dla każdej strony: każda karta utworzona przezbrowser.newPage()wymaga własnego wywołania przed pierwszymgoto()- Flaga startowa przypisuje jedno proxy dla całej przeglądarki. Aby uzyskać inny adres IP dla każdego kontekstu w ramach jednego procesu Chrome, przepuść każdy adres
http://user:pass@ip:portprzez funkcjęanonymizeProxy()z pakietuproxy-chaini przekaż wynik jakoproxyServerdobrowser.createBrowserContext({ proxyServer }) - Konfiguracja działa tak samo w przypadku
puppeteer-extraorazpuppeteer-extra-plugin-stealth - Zawsze kończ działanie wywołaniem
browser.close(), także w ścieżkach obsługi błędów, w przeciwnym razie procesy headless Chrome będą gromadzić się na serwerze
Puppeteer z proxy SOCKS5
Chrome potrafi korzystać z proxy SOCKS5 (--proxy-server=socks5://IP:PORT), ale nie obsługuje logowania do niego, a funkcja page.authenticate() nie ma zastosowania do SOCKS. W przypadku proxy ProxyV4 (protokół SOCKS5 jest oferowany poza Wietnamem; adresy IP z Wietnamu obsługują wyłącznie HTTP) masz dwie przejrzyste opcje: przełącz zamówienie na tryb HTTP lub tryb podwójny i skorzystaj z powyższego przykładu albo pozwól, aby biblioteka proxy-chain otworzyła lokalny serwer przekierowujący bez hasła, który zaloguje się za Ciebie:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Logowanie przez białą listę IP to trzeci sposób: dodaj publiczny adres IP maszyny do zamówienia, a Chrome połączy się bez żadnych danych uwierzytelniających.
Wybór adresów IP dla floty Puppeteer
Przeglądarka headless Chrome pobiera całe strony, skrypty i obrazy, więc transfer w taryfach z limitem wyczerpuje się szybko. Prywatne proxy IPv4 oraz statyczne proxy ISP od ProxyV4 nie mają limitu transferu, każdy adres IP obsługuje tylko jednego klienta, a odnowienie zachowuje ten sam adres, co ma kluczowe znaczenie, gdy sesja lub biała lista jest z nim powiązana. Porównaj produkt prywatnych IPv4 z produktem statycznych ISP, jeśli witryna docelowa inaczej traktuje pule adresów z centrów danych.
Krok po kroku
- 1
Uruchom Chrome z adresem proxy
Uruchom przeglądarkę za pomocą
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });, używając IP i portu ze swojego zamówienia w ProxyV4. - 2
Uwierzytelnij kartę
Otwórz stronę za pomocą
const page = await browser.newPage();i wywołajawait page.authenticate({ username: 'USER', password: 'PASS' });przed jakimkolwiek przejściem pod adres. - 3
Odczytaj wyjściowy adres IP
Przejdź na stronę za pomocą
await page.goto('https://proxyv4.com/api/my-ip');i upewnij się, że odpowiedź zawiera adres proxy. - 4
Zamknij przeglądarkę
Zakończ działanie wywołaniem
await browser.close();, aby żaden proces Chrome nie pozostał uruchomiony w tle.
Często zadawane pytania
Co powoduje błąd ERR_NO_SUPPORTED_PROXIES w Puppeteer?
Dane logowania wewnątrz flagi, jak w --proxy-server=http://user:pass@ip:port. Użyj --proxy-server=http://ip:port i przekaż nazwę użytkownika oraz hasło przez page.authenticate().
Pierwsza karta działa, ale nowa karta otrzymuje HTTP 407. Dlaczego?
Uwierzytelnianie jest zapisywane na poziomie pojedynczej strony. Wywołaj await newTab.authenticate({ username, password }) na każdej otwieranej stronie przed nawigacją.
Czy jedna przeglądarka Puppeteer może korzystać z kilku proxy jednocześnie?
Nie za pomocą samej flagi startowej. Użyj proxy-chain, aby przekształcić każde uwierzytelnione proxy w adres lokalny i przypisać każdemu kontekstowi przeglądarki własny proxyServer, albo uruchom osobną przeglądarkę dla każdego proxy.
Jak przetestować wiele proxy przed przekazaniem ich do Puppeteer?
Wklej je do testera proxy; obsługuje on do 100 adresów naraz i nie przechowuje haseł.
Dlaczego page.authenticate() nie działa z moim proxy SOCKS5?
Chrome nie obsługuje logowania loginem i hasłem dla SOCKS5, więc Puppeteer nie ma na co odpowiedzieć. Użyj trybu HTTP w zamówieniu, lokalnego serwera przekierowującego z proxy-chain lub logowania przez białą listę IP.
Źródła
Nielimitowane adresy IP dla headless Chrome
Prywatne IPv4 w 7 krajach oraz statyczne ISP w USA i Wietnamie, przydzielane automatycznie po opłaceniu, jeden klient na IP.
Sprawdź aktualne ceny w USA