ProxyV4

Proxy's voor webscraping: een vaste pool van IP's met onbeperkt dataverkeer

Updated:

Webscraping-proxy's die per gigabyte worden afgerekend, maken een crawler duurder zodra een pagina zwaarder wordt. Daarom zijn stabiele, geplande crawlers voordeliger met een vaste pool van adressen met onbeperkt dataverkeer. ProxyV4 levert private IPv4 in zeven landen en statische ISP in de VS en Vietnam, elk geprijsd per IP zonder datalimiet. U stemt de poolgrootte af op het aantal verzoeken per seconde dat de doelsites toestaan, en de factuur blijft gelijk, ongeacht hoe zwaar de pagina's zijn.

Private IPv4 (datacenter)
🇺🇸 Verenigde Staten
Op voorraad
Vanaf
US$ 1,10 / IP / maand
Staffelkortingen
  • 1 IPUS$ 1,85
  • 3+ IP'sUS$ 1,70
  • 10+ IP'sUS$ 1,60
  • 25+ IP'sUS$ 1,50
  • 50+ IP'sUS$ 1,40
  • 100+ IP'sUS$ 1,30
  • 200+ IP'sUS$ 1,20
  • 500+ IP'sUS$ 1,10
Koop Verenigde Staten
Private IPv4 (datacenter)
🇻🇳 Vietnam
Op voorraad
Vanaf
US$ 1,10 / IP / maand
Staffelkortingen
  • 1 IPUS$ 1,85
  • 3+ IP'sUS$ 1,70
  • 10+ IP'sUS$ 1,60
  • 25+ IP'sUS$ 1,50
  • 50+ IP'sUS$ 1,40
  • 100+ IP'sUS$ 1,30
  • 200+ IP'sUS$ 1,20
  • 500+ IP'sUS$ 1,10
Koop Vietnam

Prijzen per IP versus prijzen per GB voor een crawler

VraagStatische pool (per IP)Gemeten dataverkeer (per GB)
Wat bepaalt de kostenAantal IP's en huurperiodeGedownloade bytes, inclusief HTML, JS en assets
Wat er gebeurt als pagina's zwaarder wordenNiets; bandbreedte is onbeperktDe factuur stijgt mee
Wat de doorvoer beperktDe rate-limit per IP van elk doelwitBudget
Hoe u kunt schalenVoeg IP's toe; de prijs per IP daalt bij grotere aantallenKoop meer dataverkeer

Waarom scrapers worden geblokkeerd en wat een pool verandert

Bij het scrapen van catalogi, overzichten en openbare API's gaan de meeste blokkades niet over wie u bent, maar over hoe snel u verzoeken verstuurt: een adres dat de verzoeksnelheid van een site overschrijdt, krijgt HTTP 429. Een pool van 10 tot 100 statische IP's, elk ingesteld op een bescheiden gelijktijdigheid, houdt elk adres onder de drempelwaarde terwijl de crawler als geheel op de gewenste snelheid draait.

Single-tenancy helpt hier ook. Elk ProxyV4-IP is gedurende de hele huurperiode exclusief voor één klant, waardoor de verzoekgeschiedenis die een doelsite op dat adres ziet, uitsluitend van u is.

De pool afstemmen op het doelwit

  • Openbare catalogi en API's met een hoog volume: private IPv4 in de Verenigde Staten of Singapore, de laagste kosten per IP
  • Vietnamese e-commerce en lokale portals: Vietnam IPv4 voor binnenlandse pagina's en lokale prijzen
  • Doelen die hosting-ASN's achter een WAF filteren: statische ISP in de Verenigde Staten of Vietnam, geregistreerd bij consumenten-ISP's, wat doorgaans leidt tot minder Cloudflare-challenges
  • Doelen die voor elk verzoek een nieuw IP nodig hebben: roterende Vietnam-proxy's zijn nog niet te koop; op de roterende Vietnam-pagina vindt u de wachtlijst

Crawler-instellingen waarmee een statische pool lang meegaat

Elke lijn gebruikt standaard inloggegevens, dus in Python is de proxy simpelweg proxies = {"http": "http://user:pass@ip:port", "https": "http://user:pass@ip:port"}.

  • Wijs verzoeken round-robin toe over de lijst en voeg willekeurige jitter toe, ongeveer 2 tot 5 seconden per IP per doeldomein
  • Hergebruik verbindingen met requests.Session() of een pooled client, zodat u niet bij elk verzoek voor een TLS-handshake betaalt
  • Blokkeer in Playwright en Puppeteer afbeeldingen, lettertypen en media die u niet verwerkt
  • Wanneer een IP een HTTP 429 of 503 krijgt, haal het dan uit de rotatie voor een afkoelperiode en vertraag in plaats van direct opnieuw te proberen

Stap voor stap

  1. 1

    Koop een pool afgestemd op uw doelen

    Kies het aantal per land, bijvoorbeeld VS, Japan of VK IPv4. Volumekortingen worden automatisch toegepast naarmate het aantal toeneemt.

  2. 2

    Zet de lijst om naar URL's

    Plak de ip:port:user:pass-regels in de proxy format converter om http://user:pass@ip:port-tekenreeksen of JSON te verkrijgen.

  3. 3

    Koppel de pool aan uw framework

    Gebruik de configuratiepagina's voor Python Requests, Scrapy, Selenium of Node.js Axios.

  4. 4

    Meet vóór de eerste volledige run

    Controleer responstijden met de proxy speed test en verwijder elke lijn die traag is naar uw doelwit.

Veelgestelde vragen

Wordt dataverkeer voor scrapen op ProxyV4-proxy's gemeten?

Nee. Private IPv4 en statische ISP worden geprijsd per IP voor de huurperiode met onbeperkte bandbreedte.

Hoeveel pagina's per dag kan één statisch IP ophalen?

Dat hangt af van de rate-limit van het doelwit. Bij 1 tot 3 verzoeken per minuut per domein haalt één IP ongeveer 1.500 tot 4.000 pagina's per dag op zonder op te vallen.

Verkoopt u roterende proxy's voor scraping?

Nog niet. Roterende Vietnam-proxy's zijn alleen via een wachtlijst beschikbaar. Voorlopig doet een statische pool met round-robin-toewijzing hetzelfde voor de meeste geplande crawls.

Hoe zet ik 50 proxy's snel om naar Scrapy-formaat?

Plak ze in de proxy format converter. Deze zet ip:port:user:pass-regels direct in de browser om naar URL-tekenreeksen of een JSON-array.

Bouw een scraping-pool met vaste maandelijkse kosten

Private IPv4 in zeven landen en statische ISP in de VS en Vietnam, geprijsd per IP met onbeperkt dataverkeer.

Bekijk actuele US IPv4-prijzen

Related articles

Toepassingen
Een scraper ontwerpen rondom een pool van dedicated IP's
Een planningsgids voor datateams: bepaal je statische IP-pool, roteer via eigen code, kies IPv4, ISP of IPv6 en verzamel altijd verantwoord data.
Proxy instellen
Python-requests via een geauthenticeerde proxy, stap voor stap
Stuur Python-requests via een HTTP(S)-proxy met authenticatie: bouw de proxies-dict, gebruik een Session, codeer wachtwoorden, roteer en controleer het IP.
Proxy instellen
Playwright-proxyauthenticatie, één statisch IP per context
Geef elke Playwright-context een eigen geauthenticeerde HTTP(S)-proxy in Node.js of Python, stem tijdzone en locale af op het IP en verifieer het exit-adres.
Proxy instellen
Scrapy-proxy's: meta['proxy'], middleware-volgorde en rotatie
Gebruik geauthenticeerde HTTP(S)-proxy's in Scrapy: stel request.meta['proxy'] in, zet middleware voor HttpProxyMiddleware (750), roteer IP's en doseer crawls.
IPV4 · united states
Amerikaanse privé IPv4-proxypool voor scraping, rank tracking en advertentiecontroles
Koop Amerikaanse privé IPv4-proxy's: statische datacenter-IP's, één klant per IP, onbeperkte bandbreedte. Voor scraping, SERP-tracking en ad-checks in de VS.
IPV4 · vietnam
Vietnamese privé IPv4-proxy: één vast IP per account in grote volumes
Privé IPv4-proxy's Vietnam: statische Vietnamese datacenter-IP's, één klant per IP, lage volumeprijzen. Voor seedingprofielen, secundaire Shopee-shops en tools.
ISP · united states
Amerikaanse statische ISP-proxy: een thuis geregistreerd IP dat nooit verandert
Statische VS ISP-proxy's op IP's van consumentenproviders. Eén vast Amerikaans IP per account voor Amazon-verkopers, advertentieaccounts en Instagram.
Proxy instellen
Selenium WebDriver en geauthenticeerde proxy's: wat werkt
Selenium-proxy-auth voor ChromeDriver: waarom --proxy-server user:pass negeert, hoe selenium-wire of een onAuthRequired-extensie dit fixt, plus IP-verificatie.