ProxyV4

Puppeteer עם פרוקסי מאומת: דגל הפעלה לצד התחברות

· Updated:

אימות פרוקסי ב-Puppeteer מתבצע בשני שלבים: כתובת הפרוקסי מוגדרת בדגל ההפעלה --proxy-server=http://ip:port, ושם המשתמש והסיסמה מועברים אל await page.authenticate({ username, password }). דפדפן Chrome משיב לאתגר 407 של הפרוקסי עם פרטי הגישה הללו באמצעות DevTools Protocol, כך שסקריפט ה-Node.js שלכם יכול להשתמש ב-IP של ProxyV4 ללא תוסף דפדפן.

Puppeteer · HTTP
--proxy-server=http://ip:port + page.authenticate({ username, password })
IPv4 פרטי (datacenter)
🇺🇸 ארצות הברית
במלאי
החל מ-
‏1.10 ‏$ / IP / חודש
הנחות כמות
  • 1 IP‏1.85 ‏$
  • 3+ כתובות IP‏1.70 ‏$
  • 10+ כתובות IP‏1.60 ‏$
  • 25+ כתובות IP‏1.50 ‏$
  • 50+ כתובות IP‏1.40 ‏$
  • 100+ כתובות IP‏1.30 ‏$
  • 200+ כתובות IP‏1.20 ‏$
  • 500+ כתובות IP‏1.10 ‏$
קנה ארצות הברית
IPv4 פרטי (datacenter)
🇸🇬 סינגפור
במלאי
החל מ-
‏1.10 ‏$ / IP / חודש
הנחות כמות
  • 1 IP‏1.85 ‏$
  • 3+ כתובות IP‏1.70 ‏$
  • 10+ כתובות IP‏1.60 ‏$
  • 25+ כתובות IP‏1.50 ‏$
  • 50+ כתובות IP‏1.40 ‏$
  • 100+ כתובות IP‏1.30 ‏$
  • 200+ כתובות IP‏1.20 ‏$
  • 500+ כתובות IP‏1.10 ‏$
קנה סינגפור
פרוקסי לפי פלטפורמה:Web Scraping & CrawlingSEO & SERP TrackingYouTube

אימות פרוקסי ב-Puppeteer: דוגמה מלאה

העבירו את כתובת הפרוקסי ב---proxy-server ואת פרטי ההתחברות דרך page.authenticate() לפני הניווט הראשון. הסקריפט הזה עושה בדיוק את זה ומדפיס את כתובת ה-IP היוצאת, כך שתוכלו לאמת את הפרוקסי בהרצה אחת:

// npm i puppeteer
const puppeteer = require('puppeteer');

const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };

(async () => {
  const browser = await puppeteer.launch({
    args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
  });
  try {
    const page = await browser.newPage();
    await page.authenticate({ username: PROXY.username, password: PROXY.password });
    const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
    console.log(res.status(), await page.evaluate(() => document.body.innerText));
  } finally {
    await browser.close();
  }
})();

הפלט אמור להציג סטטוס 200 ואת ה-IP של הפרוקסי. סטטוס 407, שגיאת ERR_TUNNEL_CONNECTION_FAILED או קבלת כתובת ה-IP שלכם מעידים שאחד משני החלקים חסר; הדף פרוקסי לא עובד מפרט את הסיבות הנפוצות לפי כלי.

מדוע פרטי ההתחברות אינם חלק מהדגל

Chrome אינו מקבל פרטי התחברות בתוך --proxy-server. אם תכתבו --proxy-server=http://user:pass@ip:port, הדפדפן לא יוכל להשתמש בערך והבקשות ייכשלו, לרוב עם ERR_NO_SUPPORTED_PROXIES. השאירו את הדגל עבור כתובת ופורט בלבד, והעבירו את פרטי ההתחברות לעמוד.

סדרקריאהמה זה עושה
1puppeteer.launch({ args: ['--proxy-server=http://ip:port'] })מגדיר ל-Chrome באיזה פרוקסי להשתמש בכל בקשה
2await page.authenticate({ username, password })מספק את פרטי ההתחברות כאשר הפרוקסי משיב ב-407
3await page.goto(url, { waitUntil: 'domcontentloaded' })טוען את היעד דרך הפרוקסי המאומת

לשוניות, קונטקסטים ויותר מכתובת IP אחת

  • page.authenticate() מוגדר לפי עמוד: כל לשונית שנוצרת באמצעות browser.newPage() זקוקה לקריאה משלה לפני ה-goto() הראשון
  • דגל ההפעלה קובע פרוקסי יחיד לכל הדפדפן. כדי להשתמש ב-IP שונה לכל קונטקסט בתהליך Chrome יחיד, העבירו כל http://user:pass@ip:port דרך anonymizeProxy() מחבילת proxy-chain והעבירו את התוצאה כ-proxyServer אל browser.createBrowserContext({ proxyServer })
  • ההגדרה פועלת באופן זהה גם עם puppeteer-extra ו-puppeteer-extra-plugin-stealth
  • סיימו תמיד עם browser.close(), כולל בנתיבי שגיאה, אחרת תהליכי headless Chrome ייערמו על השרת

Puppeteer עם פרוקסי SOCKS5

Chrome יכול להשתמש בפרוקסי SOCKS5 (--proxy-server=socks5://IP:PORT), אך אינו יכול להתחבר אליו עם פרטי גישה, ו-page.authenticate() אינו חל על SOCKS. עם פרוקסי של ProxyV4 (שירות SOCKS5 מוצע מחוץ לווייטנאם; כתובות IP של וייטנאם הן ב-HTTP בלבד) יש לכם שתי אפשרויות נקיות: להעביר את ההזמנה למצב HTTP או מצב כפול ולהשתמש בדוגמה שלמעלה, או לתת ל-proxy-chain לפתוח מעביר מקומי ללא סיסמה שמתחבר עבורכם:

const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);

התחברות באמצעות IP whitelist היא דרך שלישית: הוסיפו את כתובת ה-IP הציבורית של המכונה להזמנה, ו-Chrome יתחבר ללא פרטי גישה כלל.

בחירת כתובות IP עבור מערך Puppeteer

דפדפן headless Chrome מוריד עמודים שלמים, סקריפטים ותמונות, כך שתעבורה מוגבלת מצטברת במהירות. בפרוקסי IPv4 פרטי ו-ISP סטטי של ProxyV4 אין הגבלת תעבורה, כל IP משרת לקוח אחד בלבד, וחידוש שומר על אותה כתובת — דבר משמעותי כאשר סשן או רשימת מורשים קשורים אליה. השוו בין מוצר IPv4 פרטי לבין מוצר ISP סטטי אם אתר היעד מתייחס לטווחי datacenter בצורה שונה.

צעד אחר צעד

  1. 1

    הפעלת Chrome עם כתובת הפרוקסי

    הפעילו את הדפדפן באמצעות const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });, תוך שימוש ב-IP ובפורט מההזמנה שלכם ב-ProxyV4.

  2. 2

    אימות הכרטיסייה

    פתחו דף באמצעות const page = await browser.newPage(); וקראו ל-await page.authenticate({ username: 'USER', password: 'PASS' }); לפני כל ניווט.

  3. 3

    קריאת כתובת ה-IP היוצאת

    נווטו באמצעות await page.goto('https://proxyv4.com/api/my-ip'); ובדקו שהתשובה מציגה את כתובת הפרוקסי.

  4. 4

    סגירת הדפדפן

    סיימו עם await browser.close(); כדי שלא יישארו תהליכי Chrome פועלים ברקע.

שאלות נפוצות

מה גורם לשגיאה ERR_NO_SUPPORTED_PROXIES ב-Puppeteer?

פרטי התחברות בתוך הדגל, כמו ב---proxy-server=http://user:pass@ip:port. השתמשו ב---proxy-server=http://ip:port והעבירו את שם המשתמש והסיסמה דרך page.authenticate().

הלשונית הראשונה שלי עובדת, אך לשונית חדשה מקבלת שגיאת HTTP 407. למה?

האימות נשמר לפי עמוד. קראו ל-await newTab.authenticate({ username, password }) בכל עמוד שאתם פותחים לפני שהוא מנווט.

האם דפדפן Puppeteer יחיד יכול להשתמש בכמה פרוקסים במקביל?

לא באמצעות דגל ההפעלה לבדו. השתמשו ב-proxy-chain כדי להפוך כל פרוקסי עם אימות לכתובת מקומית והגדירו לכל קונטקסט בדפדפן proxyServer משלו, או הפעילו דפדפן נפרד עבור כל פרוקסי.

איך בודקים פרוקסים רבים לפני שמעבירים אותם ל-Puppeteer?

הדביקו אותם ב-בודק הפרוקסי; הוא מטפל בעד 100 בכל פעם ואינו שומר סיסמאות.

מדוע page.authenticate() לא עובד עם פרוקסי ה-SOCKS5 שלי?

Chrome אינו תומך בהתחברות עם שם משתמש וסיסמה עבור SOCKS5, כך שאין ל-Puppeteer במה להשיב. השתמשו במצב ה-HTTP של ההזמנה, במעביר מקומי מ-proxy-chain, או בהתחברות באמצעות IP whitelist.

מקורות

כתובות IP ללא הגבלת תעבורה עבור headless Chrome

כתובות IPv4 פרטיות ב-7 מדינות לצד ISP סטטי בארה"ב ובווייטנאם, מונפקות אוטומטית לאחר התשלום, לקוח יחיד לכל IP.

בדיקת מחירים עדכניים בארה"ב

Related articles

פרוקסי לפי פלטפורמה
פרוקסי ל-Web Scraping: מאגר IP קבוע עם תעבורה ללא הגבלה
פרוקסי ל-Web Scraping עבור Python, Scrapy, Playwright ו-Selenium: מאגר כתובות IPv4 פרטיות וכתובות ISP סטטיות, רוחב פס ללא הגבלה ותמחור קבוע לפי IP.
הגדרת פרוקסי
אימות פרוקסי ב-Playwright, כתובת IP סטטית אחת לכל קונטקסט
הגדירו לכל קונטקסט דפדפן ב-Playwright פרוקסי HTTP(S) מאומת משלו ב-Node.js או ב-Python, התאימו את אזור הזמן והשפה (locale) ל-IP ואמתו את כתובת היציאה.
הגדרת פרוקסי
פרוקסי עם אימות ב-Node.js: Axios, fetch מובנה ו-Got
ניתוב בקשות Node.js ו-TypeScript דרך פרוקסי HTTP(S) מאומת: שימוש ב-https-proxy-agent עבור Axios, ב-undici ProxyAgent ל-fetch וב-hpagent עבור Got.
כלים חינמיים
המרת רשימת פרוקסי לפורמט שהכלי שלך דורש
המרה בכמות גדולה בדפדפן של רשימות פרוקסי בין ip:port:user:pass, user:pass@ip:port, כתובות http://, מזהי SOCKS5 URI, מערכי JSON וקובצי ייבוא של FoxyProxy.
פרוקסי לפי פלטפורמה
פרוקסי למעקב דירוגי SEO: לצפות בדף התוצאות שרואה גולש מקומי
פרוקסי למעקב דירוגי SEO עם כתובת IPv4 פרטית בארה"ב, בריטניה, וייטנאם, יפן ו-4 שווקים נוספים, כדי שהדירוגים, חבילות המפות והמודעות ישקפו את מה שרואים המקומיים.
פרוקסי לפי פלטפורמה
פרוקסי ל-YouTube: מנעו מסטרייק בערוץ אחד לפגוע בשאר
פרוקסי ל-YouTube ליוצרים ולצוותים המנהלים ערוצים מרובים: כתובת ISP סטטית או IPv4 לכל ערוץ, כדי שסטרייק או סגירת ערוץ אחד יישארו מבודדים בערוץ הזה בלבד.
IPV4 · united states
מאגר פרוקסי IPv4 פרטי בארה"ב לגירוד נתונים, מעקב דירוגים ובדיקת מודעות
קנו פרוקסי IPv4 פרטי לארה״ב: כתובות IP סטטיות מחוות שרתים, לקוח יחיד לכל כתובת ותעבורה ללא הגבלה. מותאם לגירוד נתונים, מעקב מיקומים ובדיקת מודעות בארה״ב.
IPV4 · singapore
פרוקסי IPv4 פרטי בסינגפור: כתובת IP קבועה אחת לכל חנות וחשבון מודעות
פרוקסי IPv4 פרטי בסינגפור: כתובת IP סטטית מחוות שרתים ב-SG לשימושכם בלבד, עבור חנויות Lazada ו-Shopee בסינגפור, חשבונות מודעות ואוטומציה אזורית.