ProxyV4

Python requests аутентификацияланган прокси аркылуу, кадам-кадамы менен

· Updated:

Python requests'те прокси колдонуу үчүн, 'http' жана 'https' ачкычтары тең http://user:pass@ip:port дарегин көрсөткөн proxies сөздүгүн өткөрүңүз. Ал сөздүктү requests.Session() объектисине жүктөсөңүз, проксиге болгон ошол эле байланыш ар бир чакыруу үчүн кайра колдонулат, бул ар бир сурамга жаңысын ачканга караганда тезирээк. Төмөндө: сөздүк, сессия, сиз кабылышы мүмкүн болгон каталар жана ProxyV4 чыгуучу IP дарегин бир сапта текшерүү.

Python Requests · HTTP
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}
Жеке IPv4 (дата-борбор)
🇺🇸 Америка Кошмо Штаттары
Кампада бар
Баштап
1,10 USD / IP / ай
Көлөмгө жараша арзандатуулар
  • 1 IP1,85 USD
  • 3+ IP1,70 USD
  • 10+ IP1,60 USD
  • 25+ IP1,50 USD
  • 50+ IP1,40 USD
  • 100+ IP1,30 USD
  • 200+ IP1,20 USD
  • 500+ IP1,10 USD
Америка Кошмо Штаттары сатып алуу
Жеке IPv4 (дата-борбор)
🇻🇳 Вьетнам
Кампада бар
Баштап
1,10 USD / IP / ай
Көлөмгө жараша арзандатуулар
  • 1 IP1,85 USD
  • 3+ IP1,70 USD
  • 10+ IP1,60 USD
  • 25+ IP1,50 USD
  • 50+ IP1,40 USD
  • 100+ IP1,30 USD
  • 200+ IP1,20 USD
  • 500+ IP1,10 USD
Вьетнам сатып алуу
Платформалар боюнча проксилер:Web Scraping & CrawlingSEO & SERP TrackingAmazon

proxies сөздүгү жөнүндө түшүндүрмө

ПараметрМаанисиСебеби
'http' ачкычы'http://user:pass@ip:port'Жөнөкөй http:// URL даректери үчүн колдонулат
'https' ачкычы'http://user:pass@ip:port'Дагы эле http:// прокси URL дареги: urllib3 проксиден CONNECT туннелин сурайт жана анын ичинде TLS иштетет
timeouttimeout=(5, 15)Туташуу үчүн 5 с, окуу үчүн 15 с, ошондуктан иштебей калган максаттуу түйүн агымды токтотуп коё албайт
Ротацияitertools.cycle(proxy_list)Сиздин статикалык IP даректериңизди кезек менен берет

Эмне үчүн Session жөнөкөй requests.get() караганда артыкчылыктуу

Жогорку деңгээлдеги ар бир requests.get() чакыруусу байланыштардын жаңы пулун курат, андыктан прокси менен TCP байланышы жана сайт менен TLS кол алышуусу ар бир жолу кайталанат. Session бул байланыштарды чакыруулардын ортосунда активдүү сактайт. Бир IP аркылуу жүздөгөн барактарды жүктөгөн скрипт үчүн бул айырма жалпы иштөө убактысынан даана байкалат.

s.proxies.update(proxies) сабын бир жолу орнотсоңуз, ар бир s.get() жана s.post() прокси аркылуу өтөт. Бир нерсени билүү керек: эгер айлана-чөйрөдө HTTP_PROXY же HTTPS_PROXY орнотулган болсо, requests аларды сессиянын жөндөөлөрү менен айкалыштырышы мүмкүн; кайсынысы колдонулуп жатканына толук ишенүү керек болгондо чакыруунун өзүндө proxies= параметрин өткөрүңүз.

Каталар жана аларды кантип түшүнүү керек

  • ProxyError жана 407 Proxy Authentication Required: прокси жеткиликтүү, бирок URL дарегиңиздеги логин буйрутмага дал келбейт. 407 катасынын барагын караңыз
  • Курамында @, : же / белгилери бар сырсөздөр URL дарегин бузат; аларды алгач urllib.parse.quote(password, safe='') менен коддоңуз
  • Прокси URL дарегин https:// форматына өзгөртүү адатта байланышты үзөт; эгер прокси портуңуз атайын TLS порту болбосо, эки ачкыч үчүн тең http:// сактаңыз
  • ConnectTimeout логин-сырсөздү эмес, IP даректи же портту көрсөтөт; жеткиликтүүлүктү порт текшергич менен текшериңиз

httpx жана aiohttp китепканаларындагы окшош ыкма

URL форматы өзгөрүүсүз калат. httpx китепканасында httpx.Client(proxy='http://user:pass@ip:port') түзүңүз; aiohttp китепканасында болсо session.get(url, proxy=...) чакыруусуна proxy= өткөрүңүз. Графикке салуу жана кайра аракет кылуу талап кылынган чоңураак скрапингди Scrapy аркылуу аткаруу адатта оңоюраак.

Кадам-кадам боюнча

  1. 1

    Прокси URL дарегин куруу

    Ар бир ProxyV4 ip:port:user:pass сабын http://user:pass@ip:port катары кайра жазыңыз, же бүтүндөй тизмени прокси форматын өзгөрткүч менен айландырыңыз.

  2. 2

    Сөздүктү түзүү

    proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'} деп жазыңыз.

  3. 3

    Аны Session'го байлоо

    s = requests.Session() түзүп, сурамдардын ортосунда байланыштар активдүү сакталышы үчүн s.proxies.update(proxies) чакырыңыз.

  4. 4

    Чыгуучу IP даректи чыгаруу

    print(s.get('https://proxyv4.com/api/my-ip', timeout=10).json()) кодун иштетиңиз; натыйжадагы IP дарек проксиники болушу керек.

Көп берилүүчү суроолор

Why is the 'https' entry an http:// URL?

Бул схема Python веб-сайт менен эмес, прокси менен кандай байланышарын сүрөттөйт. urllib3 проксиге жөнөкөй HTTP аркылуу туташып, CONNECT жөнөтөт жана ошол туннель аркылуу https:// сайты менен TLS байланышын түзөт, андыктан баракчанын трафиги баары бир шифрленген бойдон калат.

Сурамдарды 25 статикалык проксиге кантип бөлүштүрөм?

25 URL дарегин тизмеге салыңыз, pool = itertools.cycle(PROXIES) түзүңүз, жана ар бир сурам үчүн p = next(pool) алып, proxies={'http': p, 'https': p} өткөрүңүз. Бир дагы дарекке ашыкча күч келбеши үчүн ар бир IP боюнча акылга сыярлык тыныгуу сактаңыз.

Python скрипттеринен келген трафик өлчөнөбү?

Жок. ProxyV4 жеке IPv4 жана статикалык ISP тарифтери чексиз өткөрүү жөндөмдүүлүгү менен келет, андыктан узак иштеген скрипттер трафик лимитине такалбайт.

Булактар

Python скрипттери үчүн статикалык IP пулу

7 өлкөдө жеке IPv4 жана АКШ менен Вьетнамда статикалык ISP. Бир же бир нече IP сатып алыңыз; бир IP баасы санга жараша арзандайт.

АКШ боюнча актуалдуу бааларды көрүү

Related articles

Платформалар боюнча проксилер
Веб-скрейпинг үчүн проксилер: чексиз трафиктүү туруктуу IP пулу
Python, Scrapy, Playwright жана Selenium үчүн веб-скрейпинг проксилери: жеке IPv4 жана статикалык ISP пулу, чексиз трафик жана ар бир IP үчүн туруктуу баа.
Прокси орнотуу
Playwright прокси аутентификациясы, ар бир контекстке бир статикалык IP
Node.js же Python'до ар бир Playwright контекстине аутентификациялуу HTTP(S) прокси берип, убакыт алкагы менен тилди IP'ге шайкештеп, чыгуу дарегин текшериңиз.
Прокси орнотуу
Scrapy проксилери: meta['proxy'], middleware ирети жана ротация
Scrapy'де аутентификациялуу HTTP(S) прокси: request.meta['proxy'] коюп, аны HttpProxyMiddleware (750) алдына коюп, IPлерди алмаштырып, ылдамдыкты ченеңиз.
Акысыз куралдар
Прокси тизмесин куралыңыз талап кылган форматка өзгөртүңүз
Браузерде прокси тизмелерин ip:port:user:pass, user:pass@ip:port, http:// URL, SOCKS5 URI, JSON массиви жана FoxyProxy файлдары арасында жапырт алмаштырыңыз.
Платформалар боюнча проксилер
SEO позицияларын көзөмөлдөө үчүн проксилер: жергиликтүү колдонуучу көргөн натыйжаларды көрүңүз
АКШ, Улуу Британия, Вьетнам, Япония жана дагы 4 рынокто жеке IPv4 проксилери: позициялар, жергиликтүү топтомдор жана жарнамалар жергиликтүүдөй көрүнөт.
Платформалар боюнча проксилер
Ар бир аккаунтка туруктуу дарек берүүчү Amazon сатуучу проксилери
Seller Central, KDP, Merch үчүн Amazon проксилери: бир аккаунтка бир АКШ статикалык ISP же Британия/Япония жеке IPv4; сизге гана берилип, узартууда сакталат.
IPV4 · united states
Скрейпинг, позицияларга көз салуу жана жарнаманы текшерүү үчүн АКШнын жеке IPv4 прокси пулу
АКШ жеке IPv4 проксилерин сатып алыңыз: туруктуу дата-борбор IPлери, бир кардар үчүн бир IP, чексиз трафик. Скрейпинг, SERP жана жарнама текшерүү үчүн.
IPV4 · vietnam
Вьетнамдын жеке IPv4 проксиси: чоң көлөмдө ар бир аккаунт үчүн бирден туруктуу IP
Вьетнамдын жеке IPv4 проксилери: туруктуу дата-борбор IPлери, бир колдонуучуга бирден. Сидинг профилдери, кошумча Shopee дүкөндөрү жана куралдар үчүн.