ProxyV4

Autentifikasiyalı proksi ilə addım-addım Python requests

· Updated:

Python requests kitabxanasında proksi istifadə etmək üçün həm 'http', həm də 'https' açarları http://user:pass@ip:port ünvanına yönələn proxies lüğətini ötürün. Həmin lüğəti requests.Session() obyektinə təyin edin və proksi ilə eyni bağlantı hər çağırış üçün yenidən istifadə olunsun; bu, hər sorğu üçün yenisini açmaqdan daha sürətlidir. Aşağıda: lüğət, sessiya, qarşılaşa biləcəyiniz xətalar və ProxyV4 çıxış IP-sinin bir sətirlik yoxlanışı.

Python Requests · HTTP
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}
Fərdi IPv4 (data-mərkəz)
🇺🇸 Birləşmiş Ştatlar
Mövcuddur
Başlanğıc
1,10 US$ / IP / ay
Həcm endirimləri
  • 1 IP1,85 US$
  • 3+ IP1,70 US$
  • 10+ IP1,60 US$
  • 25+ IP1,50 US$
  • 50+ IP1,40 US$
  • 100+ IP1,30 US$
  • 200+ IP1,20 US$
  • 500+ IP1,10 US$
Birləşmiş Ştatlar al
Fərdi IPv4 (data-mərkəz)
🇻🇳 Vyetnam
Mövcuddur
Başlanğıc
1,10 US$ / IP / ay
Həcm endirimləri
  • 1 IP1,85 US$
  • 3+ IP1,70 US$
  • 10+ IP1,60 US$
  • 25+ IP1,50 US$
  • 50+ IP1,40 US$
  • 100+ IP1,30 US$
  • 200+ IP1,20 US$
  • 500+ IP1,10 US$
Vyetnam al

proxies lüğətinin izahı

ParametrDəyərSəbəb
'http' key'http://user:pass@ip:port'Adi http:// URL-ləri üçün istifadə olunur
'https' key'http://user:pass@ip:port'Yenə də http:// proksi URL-idir: urllib3 proksidən CONNECT tuneli istəyir və TLS-i onun daxilində işə salır
timeouttimeout=(5, 15)Bağlantı üçün 5 saniyə, oxuma üçün 15 saniyə, beləliklə işləməyən hədəf icra axınını dondura bilməz
Rotationitertools.cycle(proxy_list)Statik IP-lərinizi növbə ilə paylayır

Session nə üçün sadə requests.get() çağırışından üstündür

Hər bir birbaşa requests.get() çağırışı yeni bağlantı hovuzu yaradır, buna görə də proksi ilə TCP bağlantısı və saytla TLS əl sıxması hər dəfə təkrarlanır. Session isə çağırışlar arasında həmin bağlantıları aktiv saxlayır. Bir IP üzərindən yüzlərlə səhifə çəkən skript üçün bu fərq ümumi icra vaxtında aydın görünür.

Bir dəfə s.proxies.update(proxies) təyin edin və hər bir s.get() ilə s.post() proksidən keçsin. Nəzərə alınmalı bir məqam: mühitdə HTTP_PROXY və ya HTTPS_PROXY təyin edilibsə, requests onları sessiyanın parametrləri ilə birləşdirə bilər; hansının istifadə edildiyinə tam əmin olmaq lazım gəldikdə, çağırışın özündə proxies= ötürün.

Xətalar və onları necə anlamaq olar

  • 407 Proxy Authentication Required ilə ProxyError: proksi əlçatandır, lakin URL-inizdəki giriş məlumatları sifarişlə uyğun gəlmir. 407 error page səhifəsinə baxın
  • Tərkibində @, : və ya / olan parollar URL-i pozur; onları əvvəlcə urllib.parse.quote(password, safe='') ilə kodlaşdırın
  • Proksi URL-ini https:// olaraq dəyişmək adətən bağlantını pozur; proksi portunuz xüsusi olaraq TLS portu deyilsə, hər iki açar üçün http:// saxlayın
  • ConnectTimeout giriş məlumatlarına deyil, IP və ya porta işarə edir; əlçatanlığı port checker ilə yoxlayın

httpx və aiohttp-də eyni yanaşma

URL formatı burada da eynidir. httpx-də httpx.Client(proxy='http://user:pass@ip:port') yaradın; aiohttp-də isə session.get(url, proxy=...) çağırışına proxy= ötürün. Planlaşdırma və təkrar cəhdləri olan daha böyük kroulinq işləri adətən Scrapy ilə daha asandır.

Addım-addım

  1. 1

    Proksi URL-ini qurun

    Hər bir ProxyV4 ip:port:user:pass sətrini http://user:pass@ip:port şəklində yenidən yazın və ya bütün siyahını proxy format converter ilə çevirin.

  2. 2

    Lüğəti yaradın

    proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'} yazın.

  3. 3

    Onu Session-a qoşun

    s = requests.Session() yaradın və s.proxies.update(proxies) çağırın ki, sorğular arasında bağlantılar aktiv saxlanılsın.

  4. 4

    Çıxış IP-sini çap edin

    print(s.get('https://proxyv4.com/api/my-ip', timeout=10).json()) əmrini işə salın; nəticədəki IP proksinin IP-si olmalıdır.

Tez-tez verilən suallar

'https' qeydi nə üçün http:// URL-idir?

Sxem Python-un veb-saytla deyil, məhz proksi ilə necə əlaqə saxladığını təsvir edir. urllib3 proksiyə adi HTTP üzərindən qoşulur, CONNECT göndərir və həmin tunel vasitəsilə https:// saytı ilə TLS icra edir, beləliklə səhifə trafiki şifrələnmiş qalır.

Sorğuları 25 statik proksi arasında necə bölüşdürüm?

25 URL-i siyahıya yerləşdirin, pool = itertools.cycle(PROXIES) yaradın və hər sorğu üçün p = next(pool) götürərək proxies={'http': p, 'https': p} ötürün. Hər bir IP üçün ağlabatan gecikmə saxlayın ki, heç bir tək ünvan həddindən artıq yüklənməsin.

Python skriptlərindən gələn trafik hesablanırmı?

Xeyr. ProxyV4 fərdi IPv4 və statik ISP planları limitsiz bant genişliyi ilə təmin edilir, buna görə də uzunmüddətli işləyən skriptlər data limiti ilə qarşılaşmır.

Mənbələr

Python skriptləri üçün statik IP hovuzu

7 ölkədə fərdi IPv4, həmçinin ABŞ və Vyetnamda statik ISP. Tək bir IP və ya paket şəklində alın; say artdıqca hər IP-nin qiyməti düşür.

Canlı ABŞ qiymətlərini yoxlayın

Related articles

Platformalar üzrə proksilər
Veb skreypinq üçün proksilər: limitsiz trafikli sabit IP hovuzu
Python, Scrapy, Playwright və Selenium üçün veb skreypinq proksiləri: fərdi IPv4 və statik ISP hovuzu, limitsiz trafik, sabit IP qiymətləri.
Proksi quraşdırılması
Playwright proksi autentifikasiyası, hər kontekstə bir statik IP
Node.js və ya Python-da hər Playwright kontekstinə autentifikasiyalı HTTP(S) proksi verin, saat və lokalı IP-yə uyğunlaşdırıb çıxış ünvanını təsdiqləyin.
Proksi quraşdırılması
Scrapy proksiləri: meta['proxy'], middleware ardıcıllığı və rotasiya
Scrapy-də autentifikasiyalı HTTP(S) proksi: request.meta['proxy'] qurun, HttpProxyMiddleware (750) önünə middleware qoyun, IP-ləri dəyişib sürəti nizamlayın.
Pulsuz alətlər
Proksi siyahısını alətinizin tələb etdiyi formata çevirin
Brauzerinizdə ip:port:user:pass, user:pass@ip:port, http:// URL, SOCKS5 URI, JSON massivləri və FoxyProxy idxal faylları arasında proksiləri toplu çevirin.
Platformalar üzrə proksilər
SEO sıralama izləmə proksiləri: yerli axtarış edənlərin gördüyü nəticələr səhifəsini görün
ABŞ, BK, Vyetnam, Yaponiya və 4 digər bazarda fərdi IPv4 ilə SEO izləmə proksiləri: sıralamalar, lokal paket və reklamlar yerlilərin gördüyü ilə eyni olur.
Platformalar üzrə proksilər
Hər hesaba daimi ünvan verən Amazon satıcı proksiləri
Seller Central, KDP və Merch üçün Amazon proksisi: hər hesaba yalnız sizə icarəyə verilən və yeniləndikdə qalan ABŞ statik ISP və ya BK/Yaponiya fərdi IPv4.
IPV4 · united states
Skreypinq, Mövqe İzləmə və Reklam Yoxlanışı üçün ABŞ Fərdi IPv4 Proksi Hovuzu
ABŞ fərdi IPv4 proksiləri alın: statik data mərkəzi IP-ləri, hər IP bir müştəriyə, limitsiz trafik. Skreypinq, SERP izləmə və ABŞ reklam yoxlamaları üçün.
IPV4 · vietnam
Vyetnam Fərdi IPv4 Proksisi: Toplu Şəkildə Hər Hesab üçün Bir Sabit IP
Vyetnam fərdi IPv4 proksiləri: tək müştəriyə statik Vyetnam data mərkəzi IP-si, həcmə uyğun qiymət. Sidinq profilləri, əlavə Shopee mağazaları və alətlər üçün.