Аутентификацияланган прокси менен Puppeteer: ишке киргизүү желеги жана логин
ProxyV4 инженердик тобу тарабынан · Updated:
Puppeteer'де прокси аутентификациясы эки жерде аткарылат: прокси дареги --proxy-server=http://ip:port ишке киргизүү желегине жазылат, ал эми колдонуучунун аты менен сырсөз await page.authenticate({ username, password }) функциясына берилет. Chrome проксинин 407 талабына DevTools Protocol аркылуу ушул маалыматтар менен жооп берет, андыктан Node.js скриптиңиз браузер кеңейтүүсүз эле ProxyV4 IP дарегин колдоно алат.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
- 1 IP1,85 USD
- 3+ IP1,70 USD
- 10+ IP1,60 USD
- 25+ IP1,50 USD
- 50+ IP1,40 USD
- 100+ IP1,30 USD
- 200+ IP1,20 USD
- 500+ IP1,10 USD
Puppeteer прокси аутентификациясы: толук мисал
Биринчи өтүүгө чейин прокси дарегин --proxy-server аркылуу, ал эми кирүү маалыматтарын page.authenticate() аркылуу өткөрүңүз. Бул скрипт дал ушундай кылат жана чыгуучу IP'ни чыгарып берет, ошондуктан сиз проксини бир эле иштетүүдө текшере аласыз:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Чыккан жыйынтыкта 200 статусу жана проксинин IP дареги көрсөтүлүшү керек. 407, ERR_TUNNEL_CONNECTION_FAILED же өзүңүздүн IP дарегиңиздин чыгышы эки бөлүктүн бири жок экенин билдирет; прокси иштебей жатат бөлүмүндө ар бир курал боюнча негизги себептер келтирилген.
Эмне үчүн кирүү маалыматтары желектин бөлүгү эмес
Chrome --proxy-server ичинде кирүү маалыматтарын кабыл албайт. Эгер сиз --proxy-server=http://user:pass@ip:port деп жазсаңыз, браузер бул маанини колдоно албайт жана сурамдар көбүнчө ERR_NO_SUPPORTED_PROXIES катасы менен оңунан чыкпай калат. Желекте дарек менен портту гана калтырып, кирүү маалыматтарын баракка өткөрүп бериңиз.
| Ирети | Чакыруу | Эмне кылат |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Chrome'го ар бир сурам кайсы проксини колдонушу керектигин билдирет |
| 2 | await page.authenticate({ username, password }) | Прокси 407 кайтарганда кирүү маалыматтарын камсыздайт |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Максаттуу баракты аутентификацияланган прокси аркылуу жүктөйт |
Өтмөктөр, контексттер жана бирден көп IP
page.authenticate()ар бир барак үчүн өзүнчө коюлат:browser.newPage()аркылуу ачылган ар бир өтмөк биринчиgoto()чакырылганга чейин өзүнчө чакырууну талап кылат- Иштетүү желеги бүтүндөй браузер үчүн бир проксини бекитет. Бир Chrome процессинде ар бир контекст үчүн башка IP колдонуу үчүн ар бир
http://user:pass@ip:portдарегинproxy-chainтоптомундагыanonymizeProxy()аркылуу өткөрүп, алынган жыйынтыктыbrowser.createBrowserContext({ proxyServer })методунаproxyServerкатары бериңиз - Бул орнотуу
puppeteer-extraжанаpuppeteer-extra-plugin-stealthменен да так ошондой иштейт - Ар дайым
browser.close()менен аяктаңыз, анын ичинде ката кеткен учурларда да, болбосо серверде headless Chrome процесстери топтолуп калат
SOCKS5 проксиси менен Puppeteer
Chrome SOCKS5 проксисин (--proxy-server=socks5://IP:PORT) колдоно алат, бирок ага кире албайт жана page.authenticate() SOCKS үчүн иштебейт. ProxyV4 проксиси менен (SOCKS5 Вьетнамдан тышкары сунушталат; Вьетнам IP'лери HTTP гана) сизде эки таза жол бар: буйрутманы HTTP же кош режимге которуп, жогорудагы мисалды колдонуу, же кирүүнү сиз үчүн аткарган сырсөзсүз жергиликтүү багыттагычты ачуу үчүн proxy-chain колдонуу:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);IP ак тизмеси аркылуу кирүү — үчүнчү жол: машинанын коомдук IP дарегин буйрутмага кошуңуз, ошондо Chrome эч кандай кирүү маалыматы жок туташат.
Puppeteer флоту үчүн IP даректерди тандоо
Headless Chrome толук барактарды, скрипттерди жана сүрөттөрдү жүктөйт, ошондуктан эсептелүүчү трафик тез эле чогулуп кетет. ProxyV4 жеке IPv4 жана статикалык ISP проксилеринде трафикке чектөө жок, ар бир IP бир гана кардарга кызмат кылат жана мөөнөтүн узартканда ошол эле дарек сакталат, бул сессия же уруксат тизмеси байланышкан учурда маанилүү. Эгер максаттуу сайт маалымат борборунун диапазондоруна башкача мамиле кылса, жеке IPv4 өнүмүн статикалык ISP өнүмү менен салыштырыңыз.
Кадам-кадам боюнча
- 1
Chrome'ду прокси дареги менен ишке киргизиңиз
Браузерди ProxyV4 буйрутмаңыздагы IP жана портту колдонуп,
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });сабы менен иштетиңиз. - 2
Өтмөктүн аутентификациясын аткарыңыз
Баракты
const page = await browser.newPage();менен ачып, кандайдыр бир багыттоого чейинawait page.authenticate({ username: 'USER', password: 'PASS' });чакырыңыз. - 3
Чыгуучу IP даректи текшериңиз
await page.goto('https://proxyv4.com/api/my-ip');аркылуу өтүп, жоопто прокси дареги көрүнүп жатканын текшериңиз. - 4
Браузерди жабыңыз
Бир дагы Chrome процесси ачык калбашы үчүн ишти
await browser.close();менен бүтүрүңүз.
Көп берилүүчү суроолор
Puppeteer'де ERR_NO_SUPPORTED_PROXIES катасы эмнеден келип чыгат?
Флагдын ичиндеги кирүү маалыматтарынан, мисалы --proxy-server=http://user:pass@ip:port. Анын ордуна --proxy-server=http://ip:port колдонуп, колдонуучунун атын жана сырсөзүн page.authenticate() аркылуу өткөрүңүз.
Биринчи өтмөк иштеп жатат, бирок жаңы өтмөктө HTTP 407 чыгууда. Эмнеге?
Аутентификация ар бир барак үчүн өзүнчө сакталат. Ачылган ар бир баракта өтүүгө чейин await newTab.authenticate({ username, password }) чакырыңыз.
Бир Puppeteer браузери бир эле учурда бир нече прокси колдоно алабы?
Жалгыз иштетүү желеги аркылуу мүмкүн эмес. Аутентификацияланган ар бир проксини жергиликтүү дарекке айлантуу үчүн proxy-chain колдонуп, ар бир браузер контекстине өзүнүн proxyServer бериңиз, же ар бир прокси үчүн өзүнчө браузер иштетиңиз.
Проксилерди Puppeteer'ге берүүдөн мурун аларды кантип текшерсем болот?
Аларды прокси текшергичке чаптаңыз; ал бир убакта 100гө чейин проксини текшерет жана сырсөздөрдү сактабайт.
Эмне үчүн page.authenticate() менин SOCKS5 проксим менен иштебейт?
Chrome SOCKS5 үчүн колдонуучунун аты жана сырсөз менен кирүүнү колдобойт, ошондуктан Puppeteer жооп бере турган эч нерсе жок. Буйрутманын HTTP режимин, proxy-chain аркылуу жергиликтүү багыттагычты же IP ак тизмеси менен кирүүнү колдонуңуз.
Булактар
Headless Chrome үчүн чектөөсүз IP даректер
7 өлкөдө жеке IPv4 жана АКШ менен Вьетнамда статикалык ISP, төлөмдөн кийин автоматтык түрдө берилет, бир IP бир гана кардарга.
АКШдагы учурдагы бааларды көрүү