ProxyV4

Selenium WebDriver жана аутентификациялуу проксилер: кайсы ыкмалар иштейт

· Updated:

Selenium'де прокси аутентификациясы айланып өтүүнү талап кылат, анткени ChromeDriver'дин --proxy-server=http://ip:port желеги логин менен сырсөздү өткөрө албайт; Chrome саптагы user:pass маанисин таштап салып, WebDriver толтура албай турган кирүү терезесин көрсөтөт. Ишенимдүү эки чечим бар: Python'до ProxyV4 логинин иштеткен selenium-wire жана каалаган Selenium тилинде onAuthRequired окуясына жооп берген чакан Chrome кеңейтүүсү.

Selenium · HTTP
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)
Жеке IPv4 (дата-борбор)
🇺🇸 Америка Кошмо Штаттары
Кампада бар
Баштап
1,10 USD / IP / ай
Көлөмгө жараша арзандатуулар
  • 1 IP1,85 USD
  • 3+ IP1,70 USD
  • 10+ IP1,60 USD
  • 25+ IP1,50 USD
  • 50+ IP1,40 USD
  • 100+ IP1,30 USD
  • 200+ IP1,20 USD
  • 500+ IP1,10 USD
Америка Кошмо Штаттары сатып алуу
Статикалык резиденттик ISP
🇺🇸 Америка Кошмо Штаттары
Кампада бар
Баштап
1,50 USD / IP / ай
Көлөмгө жараша арзандатуулар
  • 1 IP2,25 USD
  • 3+ IP2,10 USD
  • 10+ IP2,00 USD
  • 25+ IP1,90 USD
  • 50+ IP1,80 USD
  • 100+ IP1,70 USD
  • 200+ IP1,60 USD
  • 500+ IP1,50 USD
Америка Кошмо Штаттары сатып алуу
Платформалар боюнча проксилер:Web Scraping & CrawlingSEO & SERP TrackingAmazon

Ыкмаларды салыштыруу

ЫкмаКантип конфигурацияланатКимге ылайыктуу
selenium-wire (Python)seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}Python'до эң тез жол; браузер ачык турганда проксини алмаштырууга болот
Auth кеңейтүүсүФондук скрипти chrome.webRequest.onAuthRequired иштеткен zip-кеңейтүүJava, C#, Python жана undetected-chromedriver үчүн бирдей ылайыктуу
Playwright'ка өтүүbrowser.newContext({ proxy: { server, username, password } })Жаңы долбоорлор үчүн; прокси логини орнотулган, кеңейтүү талап кылынбайт

Жөнөкөй --proxy-server колдонгондо эмне болот

Chrome буйрук сабынан прокси дарегин алат, бирок ага жазылган кирүү маалыматтарын тоготпойт. Прокси 407 жообун кайтарганда, Chrome тутумдук кирүү терезесин ачат. Бул терезе барактын DOM'унан тышкары болгондуктан, find_element аны көрө албайт жана скрипт убакыт бүткөнчө (таймаут) күтүп калат. Ошондуктан бардык иштеген ыкмалар кирүү дайындарын желектен башка жер аркылуу берет.

Эсиңизде болсун, selenium-wire мындан ары жигердүү колдоого алынбайт. Ал дагы эле көптөгөн орнотуулар үчүн иштейт, бирок узак мөөнөттүү долбоорлор үчүн кеңейтүү ыкмасы же Playwright коопсузураак тандоо болуп саналат.

Прокси аркылуу Selenium ишин натыйжалуу кармоо

  • Жай иштеген бөтөн скрипттерди күтпөй, DOM даяр болгондон кийин скрипт ишин улантышы үчүн options.page_load_strategy = 'eager' кылып орнотуңуз
  • Chrome 109 же андан кийинки версияларында headless иштетүү үчүн --headless=new колдонуңуз; кеңейтүүлөр, анын ичинде auth кеңейтүүсү, кадимки терезедегидей иштейт
  • Баалар же аталыштар сыяктуу тексттик гана маалымат керек болгондо, Chrome жөндөөлөрүнөн сүрөттөрдү жүктөөнү өчүрүп коюңуз
  • Капыстан бузулуп токтоп калуу Chrome процесстерин калтырып кетпеши үчүн, driver.quit() чакырыгын try / finally блогуна салыңыз

Масштабды көбөйтүүдөн мурун

Ар бир WebDriver сессиясы толук кандуу браузер болуп саналат, ошондуктан сайт аккаунттарды дарек боюнча байланыштырса, ар бир сессияга өзүнчө IP бериңиз. ProxyV4 жеке IPv4 бир кардарга гана ижарага берилет жана мөөнөтүн узартканда өз дарегин сактайт, бул узак мөөнөттүү тесттик аккаунттарды бир эле IP даректе кармап турат. Начар байланыш түшүнүксүз Selenium timeout катасы катары чыкпашы үчүн, жаңы проксилерди алгач прокси текшергич аркылуу өткөрүңүз.

Эгерде ишке киргизүүдө барактар дагы эле сервердин өз IP дарегинен ачылса же туннель катасы келип чыкса, прокси иштебей жатат барагынын Selenium бөлүмүндө негизги себептер кезеги менен көрсөтүлгөн.

Кадам-кадам боюнча

  1. 1

    selenium-wire орнотуу

    Виртуалдык чөйрөңүздө pip install selenium-wire буйругун иштетиңиз.

  2. 2

    Проксини сыпаттоо

    ProxyV4 буйрутмаңыздан sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} түзүңүз.

  3. 3

    Chrome'ду ошол параметрлер менен иштетүү

    seleniumwire ичинен webdriver импорттоп, driver = webdriver.Chrome(seleniumwire_options=sw_options) аркылуу драйверди түзүңүз.

  4. 4

    Чыгуучу IP'ни текшерүү

    driver.get('https://proxyv4.com/api/my-ip') чакырып, баракта прокси дареги көрүнгөнүн текшериңиз.

Көп берилүүчү суроолор

Эмне үчүн ChromeOptions'до --proxy-server=http://user:pass@ip:port тоготулбайт?

Chrome атайын түрдө --proxy-server маанисинен кирүү маалыматтарын өчүрүп салат. Аларды selenium-wire, onAuthRequired кеңейтүүсү аркылуу бериңиз же логин менен сырсөздү түз кабыл алган Playwright кызматына өтүңүз.

selenium-wire браузерди кайра иштетпей туруп проксини алмаштыра алабы?

Ооба. Жаңы dict ыйгарыңыз: driver.proxy = {'http': 'http://...', 'https': 'http://...'}, ошондо кийинки сурамдар жаңы проксини колдонот.

Auth кеңейтүүсү headless Chrome'до иштейби?

Ооба, --headless=new менен иштейт. Эски --headless режими кеңейтүүлөрдү мындай жүктөчү эмес.

Selenium прокси аркылуу ар бир баракта таймаут берип жатат. Эмне кылуу керек?

Ошол эле кирүү маалыматтарын колдонуп, IP түйүнүн curl менен жүктөңүз. Эгер curl да ката берсе, маселе линияда же портто; прокси таймауту боюнча колдонмо эмнелерди текшерүү керектигин тизмелейт.

Булактар

Selenium сессиялары үчүн туруктуу IP даректер

Колдонуучу жана сырсөз менен, чектөөсүз жана бир IP'ге бир кардар: 7 өлкөдө жеке IPv4 жана АКШ менен Вьетнамда статикалык ISP.

АКШдагы реалдуу бааларды көрүү

Related articles

Платформалар боюнча проксилер
Веб-скрейпинг үчүн проксилер: чексиз трафиктүү туруктуу IP пулу
Python, Scrapy, Playwright жана Selenium үчүн веб-скрейпинг проксилери: жеке IPv4 жана статикалык ISP пулу, чексиз трафик жана ар бир IP үчүн туруктуу баа.
Прокси орнотуу
Playwright прокси аутентификациясы, ар бир контекстке бир статикалык IP
Node.js же Python'до ар бир Playwright контекстине аутентификациялуу HTTP(S) прокси берип, убакыт алкагы менен тилди IP'ге шайкештеп, чыгуу дарегин текшериңиз.
Прокси орнотуу
Python requests аутентификацияланган прокси аркылуу, кадам-кадамы менен
Python сурамдарын аутентификацияланган HTTP(S) прокси аркылуу жөнөтүңүз: proxies түзүү, Session'го байлоо, сырсөздү коддоо, тизмени айлантуу жана IP текшерүү.
Прокси орнотуу
Аутентификацияланган прокси менен Puppeteer: ишке киргизүү желеги жана логин
Puppeteer прокси аутентификациясы, алгач иштөөчү мисал: дарек үчүн --proxy-server, кирүү үчүн page.authenticate(), андан соң SOCKS5, контексттер жана оңдоолор.
Платформалар боюнча проксилер
SEO позицияларын көзөмөлдөө үчүн проксилер: жергиликтүү колдонуучу көргөн натыйжаларды көрүңүз
АКШ, Улуу Британия, Вьетнам, Япония жана дагы 4 рынокто жеке IPv4 проксилери: позициялар, жергиликтүү топтомдор жана жарнамалар жергиликтүүдөй көрүнөт.
Платформалар боюнча проксилер
Ар бир аккаунтка туруктуу дарек берүүчү Amazon сатуучу проксилери
Seller Central, KDP, Merch үчүн Amazon проксилери: бир аккаунтка бир АКШ статикалык ISP же Британия/Япония жеке IPv4; сизге гана берилип, узартууда сакталат.
IPV4 · united states
Скрейпинг, позицияларга көз салуу жана жарнаманы текшерүү үчүн АКШнын жеке IPv4 прокси пулу
АКШ жеке IPv4 проксилерин сатып алыңыз: туруктуу дата-борбор IPлери, бир кардар үчүн бир IP, чексиз трафик. Скрейпинг, SERP жана жарнама текшерүү үчүн.
ISP · united states
АКШнын статикалык ISP проксиси: эч качан өзгөрбөгөн, үйгө катталган IP
Керектөөчү интернет провайдерлерине катталган АКШ туруктуу ISP проксилери. Amazon сатуучулары, жарнама жана Instagram аккаунттары үчүн бирден туруктуу IP.