ProxyV4

Permintaan Python melalui proksi dengan pengesahan, langkah demi langkah

· Updated:

Untuk menggunakan proksi dalam Python requests, hantar dict proxies dengan kunci 'http' dan 'https' kedua-duanya menghala ke http://user:pass@ip:port. Masukkan dict tersebut ke dalam requests.Session() dan sambungan yang sama ke proksi akan diguna semula untuk setiap panggilan, iaitu lebih pantas daripada membuka sambungan baharu bagi setiap permintaan. Di bawah: dict, sesi, ralat yang mungkin anda hadapi, serta semakan satu baris untuk IP keluar ProxyV4.

Python Requests · HTTP
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}
IPv4 peribadi (pusat data)
🇺🇸 Amerika Syarikat
Ada stok
Daripada
USD 1.10 / IP / bulan
Diskaun kuantiti
  • 1 IPUSD 1.85
  • 3+ IPUSD 1.70
  • 10+ IPUSD 1.60
  • 25+ IPUSD 1.50
  • 50+ IPUSD 1.40
  • 100+ IPUSD 1.30
  • 200+ IPUSD 1.20
  • 500+ IPUSD 1.10
Beli Amerika Syarikat
IPv4 peribadi (pusat data)
🇻🇳 Vietnam
Ada stok
Daripada
USD 1.10 / IP / bulan
Diskaun kuantiti
  • 1 IPUSD 1.85
  • 3+ IPUSD 1.70
  • 10+ IPUSD 1.60
  • 25+ IPUSD 1.50
  • 50+ IPUSD 1.40
  • 100+ IPUSD 1.30
  • 200+ IPUSD 1.20
  • 500+ IPUSD 1.10
Beli Vietnam

Penerangan tentang dict proxies

TetapanNilaiSebab
Kunci 'http''http://user:pass@ip:port'Digunakan untuk URL http:// biasa
Kunci 'https''http://user:pass@ip:port'Kekal sebagai URL proksi http://: urllib3 meminta terowong CONNECT daripada proksi dan menjalankan TLS di dalamnya
timeouttimeout=(5, 15)5 s untuk menyambung, 15 s untuk membaca, supaya sasaran yang mati tidak membekukan utas
Penggiliranitertools.cycle(proxy_list)Mengagihkan IP statik anda secara bergilir-gilir

Mengapa Session lebih baik daripada requests.get() biasa

Setiap panggilan requests.get() peringkat teratas membina kumpulan sambungan baharu, jadi sambungan TCP ke proksi dan jabat tangan TLS dengan laman web diulang setiap kali. Session memastikan sambungan tersebut kekal aktif antara panggilan. Bagi skrip yang mengambil ratusan halaman melalui satu IP, perbezaan ini jelas ketara pada jumlah masa larian.

Tetapkan s.proxies.update(proxies) sekali dan setiap s.get() serta s.post() akan melalui proksi. Satu perkara yang perlu diketahui: jika HTTP_PROXY atau HTTPS_PROXY ditetapkan dalam persekitaran, requests mungkin menggabungkannya dengan tetapan sesi; hantarkan proxies= pada panggilan itu sendiri apabila anda ingin memastikan tetapan mana yang digunakan.

Ralat dan cara memahaminya

  • ProxyError dengan 407 Proxy Authentication Required: proksi boleh dihubungi tetapi log masuk dalam URL anda tidak sepadan dengan pesanan. Lihat halaman ralat 407
  • Kata laluan yang mengandungi @, : atau / merosakkan URL; enkodkannya terlebih dahulu dengan urllib.parse.quote(password, safe='')
  • Menukar URL proksi kepada https:// biasanya memutuskan sambungan; kekalkan http:// untuk kedua-dua kunci melainkan port proksi anda sememangnya port TLS
  • ConnectTimeout merujuk kepada IP atau port, bukan kelayakan log masuk; uji kebolehcapaian dengan pemeriksa port

Corak yang sama dalam httpx dan aiohttp

Format URL ini diguna pakai sama. Dalam httpx, cipta httpx.Client(proxy='http://user:pass@ip:port'); dalam aiohttp, hantarkan proxy= kepada session.get(url, proxy=...). Rayapan berskala lebih besar dengan penjadualan dan cubaan semula biasanya lebih mudah dalam Scrapy.

Langkah demi langkah

  1. 1

    Bina URL proksi

    Tulis semula setiap baris ProxyV4 ip:port:user:pass sebagai http://user:pass@ip:port, atau tukar keseluruhan senarai dengan penukar format proksi.

  2. 2

    Cipta dict

    Tulis proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}.

  3. 3

    Pasang pada Session

    Cipta s = requests.Session() dan panggil s.proxies.update(proxies) supaya sambungan kekal aktif antara permintaan.

  4. 4

    Cetak IP keluar

    Jalankan print(s.get('https://proxyv4.com/api/my-ip', timeout=10).json()); IP dalam output mestilah kepunyaan proksi.

Soalan lazim

Mengapa entri 'https' menggunakan URL http://?

Skim tersebut menerangkan cara Python berkomunikasi dengan proksi, bukan dengan laman web. urllib3 menyambung ke proksi melalui HTTP biasa, menghantar CONNECT, dan kemudian melaksanakan TLS dengan laman https:// melalui terowong tersebut, jadi trafik halaman tetap disulitkan.

Bagaimanakah cara untuk mengagihkan permintaan merentasi 25 proksi statik?

Masukkan 25 URL tersebut ke dalam senarai, cipta pool = itertools.cycle(PROXIES), dan untuk setiap permintaan ambil p = next(pool) serta hantarkan proxies={'http': p, 'https': p}. Kekalkan sela masa yang wajar bagi setiap IP supaya tiada satu pun alamat dibebani secara berlebihan.

Adakah trafik daripada skrip Python bermeter?

Tidak. Pelan IPv4 persendirian dan ISP statik ProxyV4 dilengkapi dengan lebar jalur tanpa had, jadi skrip yang berjalan lama tidak akan mencecah had data.

Sumber

Kumpulan IP statik untuk skrip Python

IPv4 persendirian di 7 negara serta ISP statik di AS dan Vietnam. Beli satu IP atau secara pukal; harga bagi setiap IP menurun mengikut kuantiti.

Semak harga langsung AS

Related articles

Proksi mengikut platform
Proksi untuk web scraping: kolam IP tetap dengan trafik tanpa had
Proksi web scraping untuk Python, Scrapy, Playwright dan Selenium: kolam alamat IPv4 peribadi dan ISP statik, lebar jalur tanpa had, harga tetap setiap IP.
Persediaan proksi
Pengesahsahihan proksi Playwright, satu IP statik setiap konteks
Berikan setiap konteks pelayar Playwright proksi HTTP(S) disahkan tersendiri dalam Node.js atau Python, padankan zon masa dan lokaliti, serta sahkan IP keluar.
Persediaan proksi
Proksi Scrapy: meta['proxy'], susunan middleware dan giliran
Guna proksi HTTP(S) disahkan dalam Scrapy: tetapkan request.meta['proxy'], atur middleware sebelum HttpProxyMiddleware (750), gilir IP dan kawal kadar rayapan.
Alat percuma
Tukar format senarai proksi mengikut keperluan alatan anda
Tukar senarai proksi pukal dalam pelayar antara ip:port:user:pass, user:pass@ip:port, URL http://, URI SOCKS5, tatasusunan JSON serta fail import FoxyProxy.
Proksi mengikut platform
Proksi untuk penjejakan kedudukan SEO: lihat halaman hasil carian yang dilihat pencari tempatan
Proksi jejak ranking SEO dengan IPv4 peribadi di AS, UK, Vietnam, Jepun dan 4 pasaran lagi agar kedudukan, pek tempatan serta iklan sepadan paparan tempatan.
Proksi mengikut platform
Proksi penjual Amazon yang memberikan alamat kekal kepada setiap akaun
Proksi penjual Amazon untuk Seller Central, KDP dan Merch: ISP statik AS atau IPv4 peribadi UK/Jepun setiap akaun, disewa khusus dan kekal semasa pembaharuan.
IPV4 · united states
Kumpulan Proksi IPv4 Peribadi AS untuk Pengikisan, Penjejakan Kedudukan dan Semakan Iklan
Beli proksi IPv4 peribadi AS: IP pusat data Amerika statik, satu pelanggan per IP, data tanpa had. Sesuai untuk pengikisan, jejak SERP & semakan iklan AS.
IPV4 · vietnam
Proksi IPv4 Peribadi Vietnam: Satu IP Tetap bagi Setiap Akaun dalam Jumlah Besar
Proksi IPv4 peribadi Vietnam: IP pusat data Vietnam statik, khas setiap pelanggan, harga volum. Untuk profil pembenihan, kedai Shopee kedua dan alatan.