ProxyV4

Proksees vir webskraap: 'n vaste IP-poel met onbeperkte verkeer

Updated:

Webskraap-proksees wat per gigagreep gefaktureer word, maak 'n kruiper duurder elke keer as 'n bladsy swaarder word; daarom is bestendige, geskeduleerde kruipers goedkoper op 'n vaste poel van adresse met onbeperkte verkeer. ProxyV4 verkoop privaat IPv4 in sewe lande en statiese ISP in die VSA en Viëtnam, elk geprys per IP sonder verkeermeting. Jy bepaal die poelgrootte volgens hoeveel versoeke per sekonde die teikens duld, en die rekening bly dieselfde, ongeag wat die bladsye weeg.

Privaat IPv4 (datasentrum)
🇺🇸 Verenigde State
In voorraad
Vanaf
USD 1,10 / IP / maand
Hoeveelheidsafslag
  • 1 IPUSD 1,85
  • 3+ IP'sUSD 1,70
  • 10+ IP'sUSD 1,60
  • 25+ IP'sUSD 1,50
  • 50+ IP'sUSD 1,40
  • 100+ IP'sUSD 1,30
  • 200+ IP'sUSD 1,20
  • 500+ IP'sUSD 1,10
Koop Verenigde State
Privaat IPv4 (datasentrum)
🇻🇳 Viëtnam
In voorraad
Vanaf
USD 1,10 / IP / maand
Hoeveelheidsafslag
  • 1 IPUSD 1,85
  • 3+ IP'sUSD 1,70
  • 10+ IP'sUSD 1,60
  • 25+ IP'sUSD 1,50
  • 50+ IP'sUSD 1,40
  • 100+ IP'sUSD 1,30
  • 200+ IP'sUSD 1,20
  • 500+ IP'sUSD 1,10
Koop Viëtnam

Pryse per IP teenoor pryse per GB vir 'n kruiper

VraagStatiese poel (per IP)Gemete verkeer (per GB)
Wat dryf die kosteAantal IP's en huurtermynAfgelaaide grepe, insluitend HTML, JS en bates
Wat gebeur wanneer bladsye swaarder wordNiks; bandwydte is onbeperkDie rekening groei daarmee saam
Wat beperk deursetElke teiken se per-IP-tempobeperkingBegroting
Hoe om te skaalVoeg IP's by; die prys per IP daal met hoeveelheidKoop meer verkeer

Waarom skrapers geblokkeer word, en wat 'n poel verander

Met die skraap van katalogusse, lyste en openbare API's gaan die meeste blokkerings nie oor wie jy is nie, maar oor hoe vinnig jy versoeke rig: 'n enkele adres wat 'n werf se versoektempo oorskry, kry HTTP 429. 'n Poel van 10 tot 100 statiese IP's, elkeen gehou by 'n hoflike gelyktydigheid, hou elke adres onder die drempel terwyl die kruiper as geheel teen die vereiste spoed hardloop.

Eksklusiewe toewysing ('single tenancy') help hier ook. Elke ProxyV4-IP behoort aan een kliënt vir die hele huurtermyn, so die tempogeskietnis wat 'n teiken op daardie adres sien, is uitsluitlik joune.

Pas die poel by die teiken aan

  • Openbare katalogusse en hoëvolume-API's: privaat IPv4 in die Verenigde State of Singapoer, die laagste koste per IP
  • Viëtnamese e-handel en plaaslike portale: Viëtnam-IPv4 om plaaslike bladsye en pryse te kry
  • Teikens wat gasheer-ASN'e agter 'n WAF filtreer: statiese ISP in die Verenigde State of Viëtnam, geregistreer op verbruikers-ISP's, wat gewoonlik minder Cloudflare-uitdagings beteken
  • Teikens wat 'n nuwe IP met elke versoek benodig: roterende Viëtnam-proksees is nog nie te koop nie; die roterende Viëtnam-bladsy bevat die waglys

Kruiperinstellings wat 'n statiese poel laat hou

Elke lyn gebruik standaard-aanmeldinligting, so in Python is die instaanbediener bloot proxies = {"http": "http://user:pass@ip:port", "https": "http://user:pass@ip:port"}.

  • Wys versoeke om-die-beurt ('round-robin') oor die lys toe en voeg ewekansige skommeling ('jitter') by, ongeveer 2 tot 5 sekondes per IP per teikendomein
  • Hergebruik verbindings met requests.Session() of 'n gekombineerde kliënt sodat jy nie vir 'n TLS-handdruk met elke versoek betaal nie
  • In Playwright en Puppeteer, blokkeer beelde, lettertipes en media wat jy nie ontleed nie
  • Wanneer 'n IP HTTP 429 of 503 kry, haal dit uit rotasie vir 'n afkoeltydperk en trek terug eerder as om dadelik weer te probeer

Stap vir stap

  1. 1

    Koop 'n poel wat volgens jou teikens aangepas is

    Kies die hoeveelheid per land, byvoorbeeld VSA, Japan of VK IPv4. Volumekortings geld outomaties namate die hoeveelheid toeneem.

  2. 2

    Skakel die lys om na URL's

    Plak die ip:port:user:pass-reëls in die omskakelaar vir instaanbedienerformate om http://user:pass@ip:port-stringe of JSON te kry.

  3. 3

    Koppel die poel aan jou raamwerk

    Gebruik die opstelbladsye vir Python Requests, Scrapy, Selenium of Node.js Axios.

  4. 4

    Meet voor die eerste volledige lopie

    Toets reaksietye met die instaanbediener-spoedtoets en verwyder enige lyn wat stadig na jou teiken is.

Gereelde vrae

Word skraapverkeer op ProxyV4-proksees gemeet?

Nee. Privaat IPv4 en statiese ISP word per IP vir die huurtermyn geprys met onbeperkte bandwydte.

Hoeveel bladsye per dag kan een statiese IP herwin?

Dit hang af van die teiken se tempobeperking. Teen 1 tot 3 versoeke per minuut per domein herwin een IP ongeveer 1 500 tot 4 000 bladsye per dag sonder om uit te staan.

Verkoop julle roterende proksees vir skraapwerk?

Nog nie. Roterende Viëtnam-proksees is slegs op 'n waglys beskikbaar. Vir nou doen 'n statiese poel met om-die-beurt-toewysing dieselfde werk vir die meeste geskeduleerde kruiptake.

Hoe skakel ek 50 proksees vinnig om na Scrapy-formaat?

Plak hulle in die omskakelaar vir instaanbedienerformate. Dit skakel ip:port:user:pass-reëls in die blaaier om na URL-stringe of 'n JSON-skikking.

Bou 'n skraappoel met 'n vaste maandelikse koste

Privaat IPv4 in sewe lande en statiese ISP in die VSA en Viëtnam, geprys per IP met onbeperkte verkeer.

Gaan intydse VSA-IPv4-pryse na

Related articles

Gebruiksgevalle
Ontwerp 'n skraper rondom 'n poel van toegewyde IP's
'n Beplanningsgids vir dataspanne: bepaal 'n poel private statiese IP's, roteer dit in jou kode, kies IPv4, ISP of IPv6, en versamel data verantwoordelik.
Instaan-opstelling
Python-requests deur 'n geoutentiseerde proxy, stap vir stap
Stuur Python-versoeke deur 'n geoutentiseerde HTTP(S)-proxy: bou die proxies-dict, heg aan 'n Session, enkodeer wagwoorde, roteer 'n lys en kontroleer die IP.
Instaan-opstelling
Playwright-proxyverifikasie, een statiese IP per konteks
Gee elke Playwright-blaaierkonteks sy eie geverifieerde HTTP(S)-proxy in Node.js of Python, pas tydsone en taal by die IP aan en bevestig die uitgangsadres.
Instaan-opstelling
Scrapy-proxies: meta['proxy'], middleware-volgorde en rotasie
Gebruik geoutentiseerde HTTP(S)-proxies in Scrapy: stel request.meta['proxy'], plaas middleware voor HttpProxyMiddleware (750), roteer IP's en pas tempo aan.
IPV4 · united states
VSA Privaat IPv4-proxy-poel vir skraapwerk, rangopsporing en advertensiekontroles
Koop private VS IPv4-proxy's: statiese VSA-datasentrum-IP's, een kliënt per IP, onbeperkte bandwydte. Vir skraapwerk, SERP-opsporing en VS-advertensietoetse.
IPV4 · vietnam
Viëtnam Privaat IPv4-proxy: Een vaste IP per rekening in groot volumes
Viëtnamese private IPv4-proxy's: statiese datasentrum-IP's, een per kliënt, geprys vir volume. Vir seeding-profiele, sekondêre Shopee-winkels en nutsmiddels.
ISP · united states
VSA Statiese ISP-proxy: 'n Huisgeregistreerde IP wat nooit verander nie
Statiese VS-ISP-proxy's op IP's geregistreer by verbruikers-ISP's. Een vaste Amerikaanse IP per rekening vir Amazon-verkopers, advertensies en Instagram.
Instaan-opstelling
Selenium WebDriver en proxy's met verifikasie: wat werk
Selenium-proxy vir ChromeDriver: hoekom --proxy-server user:pass ignoreer, hoe selenium-wire of 'n onAuthRequired-uitbreiding dit regstel, en IP-verifikasie.