ProxyV4

Veb skreypinq üçün proksilər: limitsiz trafikli sabit IP hovuzu

Updated:

Geqabaytla hesablanan veb skreypinq proksiləri səhifələrin çəkisi artdıqca krouleri daha xərcli edir. Məhz buna görə nizamlı, cədvəl üzrə işləyən kroulerlər limitsiz trafikə malik sabit ünvan hovuzunda daha qənaətlidir. ProxyV4 yeddi ölkədə fərdi IPv4 və ABŞ ilə Vyetnamda statik ISP ünvanları satır; hər biri trafik məhdudiyyəti olmadan, IP başına qiymətləndirilir. Hovuzun ölçüsünü hədəf saytların dözdüyü saniyədəki sorğu sayına görə təyin edirsiniz və səhifələrin çəkisindən asılı olmayaraq ödənişiniz dəyişməz qalır.

Fərdi IPv4 (data-mərkəz)
🇺🇸 Birləşmiş Ştatlar
Mövcuddur
Başlanğıc
1,10 US$ / IP / ay
Həcm endirimləri
  • 1 IP1,85 US$
  • 3+ IP1,70 US$
  • 10+ IP1,60 US$
  • 25+ IP1,50 US$
  • 50+ IP1,40 US$
  • 100+ IP1,30 US$
  • 200+ IP1,20 US$
  • 500+ IP1,10 US$
Birləşmiş Ştatlar al
Fərdi IPv4 (data-mərkəz)
🇻🇳 Vyetnam
Mövcuddur
Başlanğıc
1,10 US$ / IP / ay
Həcm endirimləri
  • 1 IP1,85 US$
  • 3+ IP1,70 US$
  • 10+ IP1,60 US$
  • 25+ IP1,50 US$
  • 50+ IP1,40 US$
  • 100+ IP1,30 US$
  • 200+ IP1,20 US$
  • 500+ IP1,10 US$
Vyetnam al

Krouler üçün IP üzrə qiymət ilə GB üzrə qiymətin müqayisəsi

SualStatik hovuz (IP üzrə)Hesablanan trafik (GB üzrə)
Xərci formalaşdıran amilIP sayı və icarə müddətiHTML, JS və resurslar daxil yüklənən baytlar
Səhifələr ağırlaşanda nə baş verirHeç nə; trafik limitsizdirÖdəniş çəki ilə bərabər artır
Buraxılış qabiliyyətini nə məhdudlaşdırırHər hədəfin hər IP üçün qoyduğu sorğu limitiBüdcə
Necə miqyaslamaq olarIP əlavə edin; say artdıqca IP başına qiymət düşürDaha çox trafik alın

Skreyperlərin bloklanma səbəbi və hovuzun fərqi

Kataloq, elan və ictimai API məlumatlarının toplanması zamanı əksər bloklamalar kimliyinizlə deyil, sorğuları hansı sürətlə göndərməyinizlə bağlıdır: saytın sorğu limitini aşan tək ünvan HTTP 429 xətası alır. Hər biri mülayim paralel sorğu rejimində saxlanılan 10-dan 100-ə qədər statik IP hovuzu, kroulerin bütövlükdə tələb olunan sürətlə işləməsini təmin edərək hər bir ünvanı limit həddindən aşağıda saxlayır.

Tək istifadəçi prinsipi burada da köməyə çatır. Hər bir ProxyV4 IP-si bütün icarə müddətində yalnız bir müştəriyə məxsus olur, beləliklə hədəf saytın həmin ünvanda gördüyü sorğu tarixçəsi sırf sizə aid olur.

Hovuzun hədəfə uyğunlaşdırılması

  • İctimai kataloqlar və böyük həcmli API-lər: ABŞ və ya Sinqapur fərdi IPv4 proksiləri, ən sərfəli IP qiyməti
  • Vyetnam elektron ticarət və yerli portalları: yerli səhifələrə və daxili qiymətlərə çatmaq üçün Vyetnam IPv4
  • WAF arxasında hostinq ASN-lərini filtrdən keçirən hədəflər: ABŞ və ya Vyetnamda fərdi istifadəçi internet provayderlərinə (ISP) qeydiyyatlı statik ISP proksiləri; bu, adətən daha az Cloudflare yoxlaması deməkdir
  • Hər sorğuda yeni IP tələb edən hədəflər: rotasiyalı Vyetnam proksiləri hələ satışda deyil; gözləmə siyahısı rotasiyalı Vyetnam səhifəsindədir

Statik hovuzun ömrünü uzadan krouler sazlamaları

Bütün xətlər standart giriş məlumatlarından istifadə edir, ona görə də Python-da proksi sadəcə proxies = {"http": "http://user:pass@ip:port", "https": "http://user:pass@ip:port"} şəklində qurulur.

  • Sorğuları siyahı üzrə növbəli (round-robin) paylayın və hədəf domen üzrə hər IP-yə təxminən 2-5 saniyəlik təsadüfi gecikmə (jitter) əlavə edin
  • Bağlantıları requests.Session() və ya bağlantı hovuzu olan müştəri ilə yenidən istifadə edin ki, hər sorğuda TLS əlaqəsi üçün əlavə vaxt itirməyəsiniz
  • Playwright və Puppeteer daxilində ehtiyac duymadığınız şəkilləri, şriftləri və media fayllarını bloklayın
  • IP HTTP 429 və ya 503 xətası aldıqda, dərhal təkrar cəhd etmək əvəzinə onu müəyyən müddətə rotasiyadan çıxarın və fasilə verin

Addım-addım

  1. 1

    Hədəflərinizə uyğun ölçüdə hovuz alın

    Ölkə üzrə say seçin, məsələn, ABŞ, Yaponiya və ya Böyük Britaniya IPv4. Say artdıqca həcm endirimləri avtomatik tətbiq olunur.

  2. 2

    Siyahını URL formatına çevirin

    ip:port:user:pass sətirlərini proksi format çeviricisinə yapışdıraraq http://user:pass@ip:port formatında mətnlər və ya JSON əldə edin.

  3. 3

    Hovuzu freymvorkunuza qoşun

    Python Requests, Scrapy, Selenium və ya Node.js Axios quraşdırma səhifələrindən istifadə edin.

  4. 4

    İlk tam icradan əvvəl ölçmə aparın

    Proksi sürət testi vasitəsilə cavab müddətlərini yoxlayın və hədəfinizə nisbətən yavaş işləyən xətləri çıxarın.

Tez-tez verilən suallar

ProxyV4 proksilərində skreypinq trafiki hesablanırmı?

Xeyr. Fərdi IPv4 və statik ISP icarə müddəti üçün limitsiz trafiklə, IP sayına görə qiymətləndirilir.

Bir statik IP gündə neçə səhifə toplaya bilər?

Bu, hədəfin sorğu limitindən asılıdır. Hər domen üzrə dəqiqədə 1-3 sorğu ilə bir IP diqqət çəkmədən gündə təxminən 1 500 - 4 000 səhifə toplaya bilir.

Skreypinq üçün rotasiyalı proksilər satırsınızmı?

Hələlik yox. Rotasiyalı Vyetnam proksiləri yalnız gözləmə siyahısındadır. Hazırda növbəli təyinatlı statik hovuz əksər cədvəl üzrə kroulinq işləri üçün eyni vəzifəni yerinə yetirir.

50 proksini Scrapy formatına necə tez çevirə bilərəm?

Onları proksi format çeviricisinə yapışdırın. Alət brauzerdə ip:port:user:pass sətirlərini URL mətnlərinə və ya JSON massivinə çevirir.

Sabit aylıq xərclə skreypinq hovuzu qurun

Yeddi ölkədə fərdi IPv4 və ABŞ ilə Vyetnamda statik ISP, limitsiz trafiklə IP başına qiymətləndirilir.

Canlı ABŞ IPv4 qiymətlərinə baxın

Related articles

İstifadə sahələri
Fərdi İP hovuzuna əsaslanan skreyperin qurulması
Məlumat komandaları üçün bələdçi: fərdi statik İP hovuzu qurun, kodunuzda fırladın, IPv4, ISP və ya IPv6 seçərək məlumatları məsuliyyətlə toplayın.
Proksi quraşdırılması
Autentifikasiyalı proksi ilə addım-addım Python requests
Python sorğularını autentifikasiyalı HTTP(S) proksi ilə göndərin: proxies lüğəti qurun, Session-a qoşun, parolu kodlaşdırın, siyahını dövr edin, IP-ni yoxlayın.
Proksi quraşdırılması
Playwright proksi autentifikasiyası, hər kontekstə bir statik IP
Node.js və ya Python-da hər Playwright kontekstinə autentifikasiyalı HTTP(S) proksi verin, saat və lokalı IP-yə uyğunlaşdırıb çıxış ünvanını təsdiqləyin.
Proksi quraşdırılması
Scrapy proksiləri: meta['proxy'], middleware ardıcıllığı və rotasiya
Scrapy-də autentifikasiyalı HTTP(S) proksi: request.meta['proxy'] qurun, HttpProxyMiddleware (750) önünə middleware qoyun, IP-ləri dəyişib sürəti nizamlayın.
IPV4 · united states
Skreypinq, Mövqe İzləmə və Reklam Yoxlanışı üçün ABŞ Fərdi IPv4 Proksi Hovuzu
ABŞ fərdi IPv4 proksiləri alın: statik data mərkəzi IP-ləri, hər IP bir müştəriyə, limitsiz trafik. Skreypinq, SERP izləmə və ABŞ reklam yoxlamaları üçün.
IPV4 · vietnam
Vyetnam Fərdi IPv4 Proksisi: Toplu Şəkildə Hər Hesab üçün Bir Sabit IP
Vyetnam fərdi IPv4 proksiləri: tək müştəriyə statik Vyetnam data mərkəzi IP-si, həcmə uyğun qiymət. Sidinq profilləri, əlavə Shopee mağazaları və alətlər üçün.
ISP · united states
ABŞ Statik ISP Proksisi: Heç Vaxt Dəyişməyən Ev Qeydiyyatlı IP
İstehlakçı internet provayderlərinə qeydiyyatlı ABŞ statik ISP proksiləri. Amazon satıcıları, reklam və Instagram üçün hesab başına bir sabit Amerika IP-si.
Proksi quraşdırılması
Selenium WebDriver və autentifikasiyalı proksilər: işləyən həllər
ChromeDriver-də Selenium proksi girişi: --proxy-server niyə user:pass-ı saymır, selenium-wire və ya onAuthRequired genişlənməsi ilə həll və IP yoxlanışı.