Puppeteer iliyo na proksi iliyothibitishwa: launch flag pamoja na kuingia
Na Timu ya Uhandisi ya ProxyV4 · Updated:
Uthibitishaji wa proksi katika Puppeteer unafanyika katika maeneo mawili: anwani ya proksi huwekwa kwenye launch flag ya --proxy-server=http://ip:port, na jina la mtumiaji pamoja na nenosiri huwekwa kwenye await page.authenticate({ username, password }). Chrome hujibu changamoto ya 407 ya proksi kwa stakabadhi hizo kupitia DevTools Protocol, ili hati yako ya Node.js iweze kutumia IP ya ProxyV4 bila kiendelezi cha kivinjari.
--proxy-server=http://ip:port + page.authenticate({ username, password })- IP 1US$ 1.85
- IP 3+US$ 1.70
- IP 10+US$ 1.60
- IP 25+US$ 1.50
- IP 50+US$ 1.40
- IP 100+US$ 1.30
- IP 200+US$ 1.20
- IP 500+US$ 1.10
- IP 1US$ 1.85
- IP 3+US$ 1.70
- IP 10+US$ 1.60
- IP 25+US$ 1.50
- IP 50+US$ 1.40
- IP 100+US$ 1.30
- IP 200+US$ 1.20
- IP 500+US$ 1.10
Uthibitishaji wa proksi ya Puppeteer: mfano kamili
Pitisha anwani ya proksi katika --proxy-server na taarifa za kuingia kupitia page.authenticate() kabla ya uelekezaji wa kwanza. Hati hii inafanya hivyo hasa na inachapisha IP ya kutokea, ili uweze kuthibitisha proksi kwa uendeshaji mmoja:
// npm i puppeteer
const puppeteer = require('puppeteer');
const PROXY = { host: 'IP', port: 'PORT', username: 'USER', password: 'PASS' };
(async () => {
const browser = await puppeteer.launch({
args: [`--proxy-server=http://${PROXY.host}:${PROXY.port}`],
});
try {
const page = await browser.newPage();
await page.authenticate({ username: PROXY.username, password: PROXY.password });
const res = await page.goto('https://proxyv4.com/api/my-ip', { waitUntil: 'domcontentloaded' });
console.log(res.status(), await page.evaluate(() => document.body.innerText));
} finally {
await browser.close();
}
})();Matokeo yanapaswa kuonyesha hali 200 na IP ya proksi. 407, ERR_TUNNEL_CONNECTION_FAILED au IP yako mwenyewe inamaanisha kuwa nusu moja kati ya hizo mbili inakosekana; proksi haifanyi kazi huorodhesha visababishi vya kawaida kwa kila zana.
Kwa nini taarifa za kuingia si sehemu ya bendera
Chrome haikubali stakabadhi ndani ya --proxy-server. Ukiandika --proxy-server=http://user:pass@ip:port, kivinjari hakiwezi kutumia thamani hiyo na maombi hushindwa, kwa kawaida kukiwa na ERR_NO_SUPPORTED_PROXIES. Weka bendera iwe na anwani na lango tu, na ukabidhi taarifa za kuingia kwenye ukurasa.
| Mpangilio | Mwito | Inachofanya |
|---|---|---|
| 1 | puppeteer.launch({ args: ['--proxy-server=http://ip:port'] }) | Huieleza Chrome ni proksi gani kila ombi linapaswa kutumia |
| 2 | await page.authenticate({ username, password }) | Hutoa taarifa za uthibitishaji wakati proksi inapojibu 407 |
| 3 | await page.goto(url, { waitUntil: 'domcontentloaded' }) | Hupakia lengo kupitia proksi iliyothibitishwa |
Vichupo, miktadha na zaidi ya IP moja
page.authenticate()huwekwa kwa kila ukurasa: kila kichupo kutoka kwabrowser.newPage()kinahitaji wito wake kabla yagoto()ya kwanza- Bendera ya uzinduzi hurekebisha proksi moja kwa kivinjari kizima. Kwa IP tofauti kwa kila muktadha katika mchakato mmoja wa Chrome, endesha kila
http://user:pass@ip:portkupitiaanonymizeProxy()kutoka kwa kifurushi chaproxy-chainna upitishe tokeo kamaproxyServerkwenyebrowser.createBrowserContext({ proxyServer }) - Mpangilio huo hufanya kazi sawa na
puppeteer-extranapuppeteer-extra-plugin-stealth - Kila mara malizia kwa
browser.close(), ikiwa ni pamoja na njia za hitilafu, la sivyo michakato ya headless Chrome itarundikana kwenye seva
Puppeteer ikiwa na proksi ya SOCKS5
Chrome inaweza kutumia proksi ya SOCKS5 (--proxy-server=socks5://IP:PORT) lakini haiwezi kuingia kwenye proksi hiyo, na page.authenticate() haitumiki kwa SOCKS. Ukiwa na proksi ya ProxyV4 (SOCKS5 inatolewa nje ya Vietnam; IP za Vietnam ni za HTTP pekee) una chaguo mbili safi: badilisha agizo liwe la hali ya HTTP au hali mbili na utumie mfano ulio hapo juu, au ruhusu proxy-chain ifungue kisambazaji cha ndani kisicho na nenosiri ambacho kinaingia kwa niaba yako:
const proxyChain = require('proxy-chain');
const local = await proxyChain.anonymizeProxy('socks5://USER:PASS@IP:PORT');
const browser = await puppeteer.launch({ args: [`--proxy-server=${local}`] });
// ... when done:
await browser.close();
await proxyChain.closeAnonymizedProxy(local, true);Kuingia kwa orodha iliyoidhinishwa ya IP ni njia ya tatu: ongeza IP ya umma ya mashine kwenye agizo na Chrome inaunganisha bila kitambulisho chochote.
Kuchagua IP kwa kundi la Puppeteer
Headless Chrome hupakua kurasa kamili, hati na picha, kwa hivyo data inayopimwa huongezeka haraka. Proksi za ProxyV4 za kibinafsi za IPv4 na za ISP tuli hazina vipimo vya kipimo data, kila IP inahudumia mteja mmoja tu, na kusasisha kunabakiza anwani ile ile, jambo ambalo ni muhimu wakati kipindi au orodha ya wanaoruhusiwa imefungwa nayo. Linganisha bidhaa ya kibinafsi ya IPv4 na bidhaa ya ISP tuli ikiwa tovuti lengwa inachukulia masafa ya vituo vya data kwa njia tofauti.
Hatua kwa hatua
- 1
Zindua Chrome ukitumia anwani ya proksi
Anzisha kivinjari kwa
const browser = await puppeteer.launch({ args: ['--proxy-server=http://ip:port'] });, ukitumia IP na port kutoka kwenye agizo lako la ProxyV4. - 2
Thibitisha kichupo
Fungua ukurasa kwa
const page = await browser.newPage();na piga mwito waawait page.authenticate({ username: 'USER', password: 'PASS' });kabla ya uelekezaji wowote. - 3
Soma IP ya kutokea
Elekeza kivinjari kwa
await page.goto('https://proxyv4.com/api/my-ip');na uhakikishe kuwa jibu linaonyesha anwani ya proksi. - 4
Funga kivinjari
Kamilisha kwa
await browser.close();ili kusiwe na mchakato wowote wa Chrome unaoendelea kufanya kazi.
Maswali yanayoulizwa mara kwa mara
Ni nini kinachosababisha ERR_NO_SUPPORTED_PROXIES katika Puppeteer?
Taarifa za kuingia ndani ya bendera, kama vile --proxy-server=http://user:pass@ip:port. Tumia --proxy-server=http://ip:port na upitishe jina la mtumiaji na nenosiri kupitia page.authenticate().
Kichupo changu cha kwanza kinafanya kazi lakini kichupo kipya kinapata HTTP 407. Kwa nini?
Uthibitishaji huhifadhiwa kwa kila ukurasa. Tekeleza await newTab.authenticate({ username, password }) kwenye kila ukurasa unaofungua kabla ya kuelekeza.
Je, kivinjari kimoja cha Puppeteer kinaweza kutumia proksi kadhaa kwa mara moja?
Si kupitia bendera ya uzinduzi pekee. Tumia proxy-chain kubadilisha kila proksi iliyothibitishwa kuwa anwani ya ndani na upe kila muktadha wa kivinjari proxyServer yake yenyewe, au anzisha kivinjari kimoja kwa kila proksi.
Je, ninajaribuje proksi nyingi kabla ya kuzipa Puppeteer?
Zibandike kwenye kichunguzi cha proksi; hushughulikia hadi 100 kwa wakati mmoja na haihifadhi manenosiri.
Kwa nini page.authenticate() haifanyi kazi na proksi yangu ya SOCKS5?
Chrome haiauni kuingia kwa jina la mtumiaji na nenosiri kwa SOCKS5, kwa hivyo hakuna chochote ambacho Puppeteer inaweza kujibu. Tumia hali ya HTTP ya agizo, kisambazaji cha ndani kutoka kwa proxy-chain, au kuingia kwa orodha iliyoidhinishwa ya IP.
Vyanzo
IP zisizo na kikomo cha data kwa headless Chrome
IPv4 binafsi katika nchi 7 pamoja na ISP tuli nchini Marekani na Vietnam, hutolewa kiotomatiki baada ya malipo, mteja mmoja kwa kila IP.
Angalia bei za sasa za Marekani