Autentifikatsiyali proksi bilan Puppeteer: launch flag va kirish
ProxyV4 muhandislar jamoasi tomonidan tayyorlandi · Updated:
Puppeteer proksi autentifikatsiyasi ikki joyda amalga oshiriladi: proksi manzili --proxy-server=http://ip:port ishga tushirish flagiga kiritiladi, login va parol esa await page.authenticate({ username, password }) funksiyasiga uzatiladi. Chrome DevTools Protocol orqali proksining 407 so'roviga ushbu hisob ma'lumotlari bilan javob beradi, shuning uchun Node.js skriptingiz brauzer kengaytmasisiz ProxyV4 IP-manzilidan foydalana oladi.
--proxy-server=http://ip:port + page.authenticate({ username, password })- 1 ta IP1,85 US$
- 3+ ta IP1,70 US$
- 10+ ta IP1,60 US$
- 25+ ta IP1,50 US$
- 50+ ta IP1,40 US$
- 100+ ta IP1,30 US$
- 200+ ta IP1,20 US$
- 500+ ta IP1,10 US$
- 1 ta IP1,85 US$
- 3+ ta IP1,70 US$
- 10+ ta IP1,60 US$
- 25+ ta IP1,50 US$
- 50+ ta IP1,40 US$
- 100+ ta IP1,30 US$
- 200+ ta IP1,20 US$
- 500+ ta IP1,10 US$
Puppeteer proksi autentifikatsiyasi: to‘liq misol
Birinchi o‘tishdan oldin proksi manzilini --proxy-server flagida, login ma’lumotlarini esa page.authenticate() orqali uzating. Ushbu skript aynan shunday qiladi va chiqish IP-manzilini chiqaradi, shunda siz proksini bir urinishda tekshirib olishingiz mumkin:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Natijada 200 holat kodi va proksi IP-manzili ko‘rinishi kerak. 407, ERR_TUNNEL_CONNECTION_FAILED yoki shaxsiy IP-manzilingiz chiqishi bu ikki qismdan biri yetishmayotganini anglatadi; proksi ishlamayapti sahifasida har bir vosita bo‘yicha odatiy sabablar keltirilgan.
Nega login flag tarkibiga kirmaydi
Chrome --proxy-server ichida login ma’lumotlarini qabul qilmaydi. Agar siz --proxy-server=http://user:pass@ip:port deb yozsangiz, brauzer ushbu qiymatdan foydalana olmaydi va so‘rovlar odatda ERR_NO_SUPPORTED_PROXIES xatosi bilan muvaffaqiyatsiz tugaydi. Flagda faqat manzil va portni qoldiring, kirish ma’lumotlarini esa sahifaga uzating.
| Tartib | Chaqiruv | Nima bajaradi |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Chrome-ga har bir so‘rov qaysi proksidan foydalanishi kerakligini bildiradi |
| 2 | await page.authenticate({ username, password }) | Proksi 407 javobini qaytarganda login ma’lumotlarini taqdim etadi |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Nishon sahifani autentifikatsiyadan o‘tgan proksi orqali yuklaydi |
Varaqalar, kontekstlar va bir nechta IP
page.authenticate()har bir sahifa uchun o‘rnatiladi:browser.newPage()orqali ochilgan har bir varaqa birinchigoto()chaqiruvidan oldin o‘z chaqiruviga ega bo‘lishi kerak- Ishga tushirish flagi butun brauzer uchun bitta proksini belgilaydi. Bitta Chrome jarayonida har bir kontekst uchun alohida IP kerak bo‘lsa, har bir
http://user:pass@ip:portmanziliniproxy-chainpaketidagianonymizeProxy()orqali o‘tkazing va natijanibrowser.createBrowserContext({ proxyServer })gaproxyServersifatida uzating - Bu sozlama
puppeteer-extravapuppeteer-extra-plugin-stealthbilan ham xuddi shunday ishlaydi - Doimo
browser.close()bilan yakunlang, shu jumladan xatolik yuz berganda ham, aks holda serverda headless Chrome jarayonlari to‘planib qoladi
SOCKS5 proksi bilan Puppeteer
Chrome SOCKS5 proksisidan (--proxy-server=socks5://IP:PORT) foydalana oladi, lekin unga kira olmaydi, page.authenticate() esa SOCKS uchun amal qilmaydi. ProxyV4 proksisi bilan (SOCKS5 Vetnamdan tashqarida taklif etiladi; Vetnam IP-manzillari faqat HTTP) sizda ikkita qulay variant bor: buyurtmani HTTP yoki ikki tomonlama rejimga o‘tkazing va yuqoridagi misoldan foydalaning, yoki proxy-chain siz uchun avtomatik kiruvchi mahalliy va parolsiz yo‘naltirgichni ochishiga ruxsat bering:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);IP oq ro‘yxati orqali kirish uchinchi usuldir: qurilmaning ommaviy IP-manzilini buyurtmaga qo‘shing va Chrome hech qanday login ma’lumotlarisiz ulanadi.
Puppeteer tizimi uchun IP-manzillarni tanlash
Headless Chrome to‘liq sahifalar, skriptlar va rasmlarni yuklab oladi, shuning uchun cheklangan trafik tezda tugab qolishi mumkin. ProxyV4 individual IPv4 va statik ISP proksilarida trafik cheklovi yo‘q, har bir IP faqat bitta mijozga xizmat qiladi va muddatni uzaytirishda manzil o‘zgarmaydi, bu esa seans yoki ruxsat etilganlar ro‘yxati unga bog‘langan bo‘lsa muhimdir. Agar maqsadli sayt ma’lumotlar markazi diapazonlariga boshqacha munosabatda bo‘lsa, individual IPv4 mahsulotini statik ISP mahsuloti bilan taqqoslang.
Bosqichma-bosqich
- 1
Chrome-ni proksi manzili bilan ishga tushiring
Brauzerni ProxyV4 buyurtmangizdagi IP va portdan foydalanib,
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });bilan ishga tushiring. - 2
Varaqni autentifikatsiyadan o'tkazing
const page = await browser.newPage();orqali sahifani oching va har qanday navigatsiyadan oldinawait page.authenticate({ username: 'USER', password: 'PASS' });ni chaqiring. - 3
Chiquvchi IP-ni tekshiring
await page.goto('https://proxyv4.com/api/my-ip');orqali o'ting va javobda proksi manzili ko'rsatilganligini tekshiring. - 4
Brauzerni yoping
Birorta ham Chrome jarayoni ishlab qolmasligi uchun
await browser.close();bilan yakunlang.
Ko‘p beriladigan savollar
Puppeteer-da ERR_NO_SUPPORTED_PROXIES xatosiga nima sabab bo‘ladi?
Flag ichidagi login ma’lumotlari, masalan --proxy-server=http://user:pass@ip:port. Buning o‘rniga --proxy-server=http://ip:port dan foydalaning hamda foydalanuvchi nomi va parolni page.authenticate() orqali uzating.
Birinchi varaqa ishlayapti, ammo yangi varaqada HTTP 407 xatosi chiqyapti. Nega?
Autentifikatsiya har bir sahifa uchun alohida saqlanadi. Har bir ochilgan sahifada unga o‘tishdan oldin await newTab.authenticate({ username, password }) ni chaqiring.
Bitta Puppeteer brauzeri bir vaqtning o‘zida bir nechta proksidan foydalana oladimi?
Faqat ishga tushirish flagi orqali emas. Har bir autentifikatsiyadan o‘tgan proksini mahalliy manzilga aylantirish uchun proxy-chain dan foydalaning va har bir brauzer kontekstiga o‘z proxyServer ini bering, yoki har bir proksi uchun bitta brauzerni ishga tushiring.
Puppeteer-ga berishdan oldin ko‘plab proksilarni qanday tekshirish mumkin?
Ularni proksi tekshirgichga joylashtiring; u bir vaqtning o‘zida 100 tagacha manzilni tekshira oladi va parollarni saqlamaydi.
Nega page.authenticate() mening SOCKS5 proksim bilan ishlamayapti?
Chrome SOCKS5 uchun foydalanuvchi nomi va parol bilan kirishni qo‘llab-quvvatlamaydi, shuning uchun Puppeteer javob bera olmaydi. Buyurtmaning HTTP rejimidan, proxy-chain orqali mahalliy yo‘naltirgichdan yoki IP oq ro‘yxati orqali kirishdan foydalaning.
Manbalar
Headless Chrome uchun cheklovsiz IP-lar
7 ta davlatda xususiy IPv4 va US hamda Vyetnamda statik ISP, to'lovdan so'ng avtomatik tarzda beriladi, har bir IP faqat bitta mijoz uchun.
US narxlarini jonli tekshirish