Puppeteer с прокси с авторизацией: флаг запуска и логин
От инженерной команды ProxyV4 · Updated:
Авторизация прокси в Puppeteer выполняется в двух местах: адрес прокси указывается во флаге запуска --proxy-server=http://ip:port, а логин и пароль передаются в await page.authenticate({ username, password }). Chrome отвечает на 407-й запрос прокси этими учетными данными по DevTools Protocol, поэтому ваш Node.js-скрипт может работать с IP от ProxyV4 без расширения для браузера.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 $
- От 3 IP1,70 $
- От 10 IP1,60 $
- От 25 IP1,50 $
- От 50 IP1,40 $
- От 100 IP1,30 $
- От 200 IP1,20 $
- От 500 IP1,10 $
- 1 IP1,85 $
- От 3 IP1,70 $
- От 10 IP1,60 $
- От 25 IP1,50 $
- От 50 IP1,40 $
- От 100 IP1,30 $
- От 200 IP1,20 $
- От 500 IP1,10 $
Авторизация прокси в Puppeteer: полный пример
Передайте адрес прокси в --proxy-server, а данные для входа — через page.authenticate() перед первым переходом. Этот скрипт выполняет именно эти действия и выводит выходной IP, позволяя проверить прокси за один запуск:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();В выводе должен появиться статус 200 и IP-адрес прокси. Ошибка 407, ERR_TUNNEL_CONNECTION_FAILED или отображение вашего реального IP означает, что одна из двух частей настройки пропущена; в статье прокси не работает перечислены типичные причины для каждого инструмента.
Почему данные для входа не передаются во флаге
Chrome не принимает учетные данные внутри --proxy-server. Если указать --proxy-server=http://user:pass@ip:port, браузер не сможет обработать это значение, и запросы завершатся ошибкой, чаще всего ERR_NO_SUPPORTED_PROXIES. Оставляйте во флаге только адрес и порт, а логин и пароль передавайте на уровне страницы.
| Порядок | Вызов | Что делает |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Указывает Chrome, какой прокси использовать для каждого запроса |
| 2 | await page.authenticate({ username, password }) | Передает учетные данные при ответе 407 от прокси |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Загружает целевую страницу через авторизованный прокси |
Вкладки, контексты и использование нескольких IP
page.authenticate()задается отдельно для каждой страницы: каждой вкладке изbrowser.newPage()требуется собственный вызов перед первымgoto()- Флаг запуска жестко задает один прокси для всего браузера. Чтобы использовать отдельный IP для каждого контекста в рамках одного процесса Chrome, пропустите каждый
http://user:pass@ip:portчерезanonymizeProxy()из пакетаproxy-chainи передайте результат в качествеproxyServerвbrowser.createBrowserContext({ proxyServer }) - Настройка работает точно так же с
puppeteer-extraиpuppeteer-extra-plugin-stealth - Всегда завершайте работу вызовом
browser.close(), в том числе при обработке ошибок, иначе фоновые headless-процессы Chrome будут накапливаться на сервере
Puppeteer с прокси SOCKS5
Chrome умеет работать с SOCKS5-прокси (--proxy-server=socks5://IP:PORT), но не поддерживает авторизацию в них, а page.authenticate() не применяется к SOCKS. С прокси от ProxyV4 (SOCKS5 доступен за пределами Вьетнама; вьетнамские IP работают только по HTTP) есть два удобных варианта: переключить заказ в режим HTTP или двойной режим и использовать пример выше, либо позволить proxy-chain поднять локальный форвардер без пароля, который выполнит авторизацию за вас:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Авторизация по белому списку IP — третий способ: добавьте публичный IP сервера или компьютера в заказ, и Chrome сможет подключаться без логина и пароля.
Выбор IP-адресов для пула Puppeteer
Headless Chrome скачивает страницы целиком, включая скрипты и изображения, поэтому лимитированный трафик расходуется быстро. Приватные IPv4 и статические ISP-прокси от ProxyV4 не тарифицируют трафик, каждый IP предоставляется строго в одни руки, а продление сохраняет прежний адрес, что критично при привязке сессий или белых списков. Сравните приватные IPv4-прокси со статическими ISP-прокси, если целевой сайт по-разному реагирует на серверные подсети.
Пошаговые инструкции
- 1
Запустите Chrome с адресом прокси
Запустите браузер с помощью
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });, указав IP и порт из вашего заказа ProxyV4. - 2
Авторизуйте вкладку
Откройте страницу с помощью
const page = await browser.newPage();и вызовитеawait page.authenticate({ username: 'USER', password: 'PASS' });перед любым переходом. - 3
Проверьте выходной IP
Выполните переход через
await page.goto('https://proxyv4.com/api/my-ip');и убедитесь, что в ответе отображается адрес прокси. - 4
Закройте браузер
Завершите работу вызовом
await browser.close();, чтобы в системе не осталось работающих процессов Chrome.
Часто задаваемые вопросы
Чем вызвана ошибка ERR_NO_SUPPORTED_PROXIES в Puppeteer?
Указанием учетных данных внутри флага, например --proxy-server=http://user:pass@ip:port. Используйте --proxy-server=http://ip:port, а имя пользователя и пароль передавайте через page.authenticate().
Первая вкладка работает, а новая выдает HTTP 407. Почему?
Авторизация сохраняется отдельно для каждой страницы. Вызывайте await newTab.authenticate({ username, password }) для каждой открываемой страницы перед переходом по адресу.
Может ли один браузер Puppeteer использовать несколько прокси одновременно?
Только с помощью флага запуска — нет. Используйте proxy-chain, чтобы преобразовать каждый прокси с авторизацией в локальный адрес и задать каждому контексту браузера свой proxyServer, либо запускайте отдельный браузер под каждый прокси.
Как протестировать много прокси перед их передачей в Puppeteer?
Вставьте их в чекер прокси; он проверяет до 100 адресов одновременно и не сохраняет пароли.
Почему page.authenticate() не работает с моим SOCKS5-прокси?
Chrome не поддерживает авторизацию по логину и паролю для SOCKS5, поэтому Puppeteer не может на нее ответить. Переключите заказ в режим HTTP, используйте локальный форвардер через proxy-chain или авторизацию по белому списку IP.
Источники
Безлимитные IP для headless Chrome
Индивидуальные IPv4 в 7 странах и статические ISP в США и Вьетнаме: автоматическая выдача после оплаты, строго в одни руки.
Посмотреть актуальные цены для США