ProxyV4

ধাপে ধাপে অথেনটিকেটেড প্রক্সির মাধ্যমে Python রিকোয়েস্ট

· Updated:

Python requests-এ প্রক্সি ব্যবহার করতে, একটি proxies ডিক্ট পাস করুন যার 'http' এবং 'https' উভয় কী-ই http://user:pass@ip:port-কে নির্দেশ করে। এই ডিক্টটি একটি requests.Session()-এ যুক্ত করুন, যাতে প্রতিটি কলের জন্য প্রক্সির একই কানেকশন পুনরায় ব্যবহৃত হয়, যা প্রতি রিকোয়েস্টে নতুন কানেকশন খোলার চেয়ে দ্রুততর। নিচে বিস্তারিত: ডিক্ট, সেশন, যেসব ত্রুটির সম্মুখীন হতে পারেন এবং ProxyV4 এক্সিট আইপি এক লাইনে যাচাই করার উপায়।

Python Requests · HTTP
proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}
প্রাইভেট IPv4 (ডেটাসেন্টার)
🇺🇸 যুক্তরাষ্ট্র
স্টকে আছে
থেকে
১.১০ US$ / IP / মাস
পরিমাণের ওপর ছাড়
  • 1 IP১.৮৫ US$
  • 3+ IP১.৭০ US$
  • 10+ IP১.৬০ US$
  • 25+ IP১.৫০ US$
  • 50+ IP১.৪০ US$
  • 100+ IP১.৩০ US$
  • 200+ IP১.২০ US$
  • 500+ IP১.১০ US$
যুক্তরাষ্ট্র কিনুন
প্রাইভেট IPv4 (ডেটাসেন্টার)
🇻🇳 ভিয়েতনাম
স্টকে আছে
থেকে
১.১০ US$ / IP / মাস
পরিমাণের ওপর ছাড়
  • 1 IP১.৮৫ US$
  • 3+ IP১.৭০ US$
  • 10+ IP১.৬০ US$
  • 25+ IP১.৫০ US$
  • 50+ IP১.৪০ US$
  • 100+ IP১.৩০ US$
  • 200+ IP১.২০ US$
  • 500+ IP১.১০ US$
ভিয়েতনাম কিনুন
প্ল্যাটফর্ম অনুযায়ী প্রক্সি:Web Scraping & CrawlingSEO & SERP TrackingAmazon

proxies ডিক্টের ব্যাখ্যা

সেটিংভ্যালুকারণ
'http' key'http://user:pass@ip:port'সাধারণ http:// URL-এর জন্য ব্যবহৃত হয়
'https' key'http://user:pass@ip:port'এখনও একটি http:// প্রক্সি URL: urllib3 প্রক্সির কাছে একটি CONNECT টানেল অনুরোধ করে এবং এর ভেতরে TLS চালায়
timeouttimeout=(5, 15)কানেক্ট হতে 5 সেকেন্ড, রিড করতে 15 সেকেন্ড, যাতে অকার্যকর কোনো টার্গেট থ্রেডকে আটকে না রাখে
রোটেশনitertools.cycle(proxy_list)পর্যায়ক্রমে আপনার স্ট্যাটিক আইপিগুলো প্রদান করে

সরাসরি requests.get()-এর চেয়ে Session কেন সেরা

প্রতিটি টপ-লেভেল requests.get() কল একটি নতুন কানেকশন পুল তৈরি করে, ফলে প্রতিবার প্রক্সির সাথে TCP কানেকশন এবং সাইটের সাথে TLS হ্যান্ডশেক পুনরায় সম্পন্ন হয়। একটি Session কলগুলোর মাঝে সেই কানেকশনগুলো সচল রাখে। একটি স্ক্রিপ্ট যা একটি আইপির মাধ্যমে শত শত পেজ ফেচ করে, তার জন্য মোট রান টাইমে এই পার্থক্য স্পষ্ট বোঝা যায়।

একবার s.proxies.update(proxies) সেট করলেই প্রতিটি s.get() এবং s.post() প্রক্সির মধ্য দিয়ে যাবে। একটি বিষয় জেনে রাখা ভালো: পরিবেশে HTTP_PROXY বা HTTPS_PROXY সেট করা থাকলে, requests সেগুলোকে সেশনের সেটিংসের সাথে যুক্ত করতে পারে; কোনটি ব্যবহার করা হচ্ছে তা নিশ্চিত করতে চাইলে সরাসরি কলটিতে proxies= পাস করুন।

ত্রুটিসমূহ এবং তা বোঝার উপায়

  • 407 Proxy Authentication Required সহ ProxyError: প্রক্সিতে পৌঁছানো যাচ্ছে কিন্তু আপনার URL-এর লগইন তথ্যের সাথে অর্ডারের মিল নেই। বিস্তারিত দেখুন 407 error page পাতায়
  • @, : বা / সম্বলিত পাসওয়ার্ড URL-কে নষ্ট করে দেয়; প্রথমে urllib.parse.quote(password, safe='') দিয়ে সেগুলোকে এনকোড করে নিন
  • প্রক্সি URL-কে https://-এ পরিবর্তন করলে সাধারণত কানেকশন বিচ্ছিন্ন হয়ে যায়; আপনার প্রক্সি পোর্টটি সুনির্দিষ্টভাবে কোনো TLS পোর্ট না হলে উভয় কী-এর জন্যই http:// রাখুন
  • ConnectTimeout আইপি বা পোর্ট সংক্রান্ত সমস্যা নির্দেশ করে, ক্রেডেনশিয়াল নয়; পোর্ট চেকার দিয়ে কানেক্টিভিটি পরীক্ষা করুন

httpx এবং aiohttp-এ একই প্যাটার্ন

এখানেও একই URL ফরম্যাট প্রযোজ্য। httpx-এ httpx.Client(proxy='http://user:pass@ip:port') তৈরি করুন; আর aiohttp-এ session.get(url, proxy=...)-এ proxy= পাস করুন। শিডিউলিং এবং রিট্রাই সহ তুলনামূলক বড় স্ক্র্যাপিংয়ের ক্ষেত্রে সাধারণত Scrapy ব্যবহার করা সহজ।

ধাপে ধাপে

  1. 1

    প্রক্সি URL তৈরি করুন

    প্রতিটি ProxyV4 ip:port:user:pass লাইনকে http://user:pass@ip:port হিসেবে লিখুন, অথবা প্রক্সি ফরম্যাট কনভার্টার দিয়ে পুরো তালিকাটি রূপান্তর করুন।

  2. 2

    ডিক্ট তৈরি করুন

    proxies = {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'} লিখুন।

  3. 3

    Session-এ এটি যুক্ত করুন

    s = requests.Session() তৈরি করুন এবং s.proxies.update(proxies) কল করুন যাতে রিকোয়েস্টগুলোর মাঝে কানেকশন সচল থাকে।

  4. 4

    এক্সিট আইপি প্রিন্ট করুন

    print(s.get('https://proxyv4.com/api/my-ip', timeout=10).json()) রান করুন; আউটপুটের আইপিটি প্রক্সির আইপি হওয়া উচিত।

সাধারণ প্রশ্নোত্তর

'https' এন্ট্রিটি কেন একটি http:// URL?

এই স্কিমটি নির্ধারণ করে Python কীভাবে প্রক্সির সাথে যোগাযোগ করবে, ওয়েবসাইটের সাথে নয়। urllib3 সাধারণ HTTP-র মাধ্যমে প্রক্সির সাথে সংযুক্ত হয়, CONNECT পাঠায় এবং তারপর সেই টানেলের মাধ্যমে https:// সাইটের সাথে TLS সম্পন্ন করে, ফলে পেজের ট্র্যাফিক সম্পূর্ণ এনক্রিপ্ট করা থাকে।

কীভাবে 25টি স্ট্যাটিক প্রক্সিতে রিকোয়েস্ট ভাগ করে পাঠাব?

25টি URL একটি তালিকায় রাখুন, pool = itertools.cycle(PROXIES) তৈরি করুন এবং প্রতিটি রিকোয়েস্টের জন্য p = next(pool) নিয়ে proxies={'http': p, 'https': p} পাস করুন। প্রতি আইপির জন্য যৌক্তিক বিলম্ব বজায় রাখুন যাতে কোনো একক ঠিকানার ওপর অতিরিক্ত চাপ না পড়ে।

Python স্ক্রিপ্টের ট্র্যাফিক কি মিটারযুক্ত?

না। ProxyV4-এর প্রাইভেট IPv4 এবং স্ট্যাটিক ISP প্ল্যানগুলোতে আনলিমিটেড ব্যান্ডউইথ থাকে, তাই দীর্ঘ সময় চলা স্ক্রিপ্টগুলো কোনো ডেটা লিমিটের সম্মুখীন হয় না।

উৎসসমূহ

Python স্ক্রিপ্টের জন্য একটি স্ট্যাটিক আইপি পুল

7টি দেশে প্রাইভেট IPv4 এবং সাথে US ও Vietnam-এ স্ট্যাটিক ISP। একটি আইপি বা একসাথে একাধিক কিনুন; পরিমাণ বাড়ার সাথে সাথে আইপি প্রতি খরচ কমে আসে।

US-এর লাইভ মূল্য দেখুন

Related articles

প্ল্যাটফর্ম অনুযায়ী প্রক্সি
ওয়েব স্ক্র্যাপিংয়ের জন্য প্রক্সি: আনমিটারড ট্রাফিকসহ ফিক্সড IP পুল
Python, Scrapy, Playwright ও Selenium-এর জন্য ওয়েব স্ক্র্যাপিং প্রক্সি: প্রাইভেট IPv4 ও স্ট্যাটিক ISP পুল, আনলিমিটেড ব্যান্ডউইথ ও IP-প্রতি নির্ধারিত মূল্য।
প্রক্সি সেটআপ
Playwright প্রক্সি প্রমাণীকরণ, কনটেক্সট প্রতি একটি স্ট্যাটিক IP
Node.js বা Python-এ প্রতিটি Playwright কনটেক্সটকে নিজস্ব অথেনটিকেটেড HTTP(S) প্রক্সি দিন, IP-র সাথে টাইমজোন ও লোকেল মেলান এবং এক্সিট অ্যাড্রেস নিশ্চিত করুন।
প্রক্সি সেটআপ
Scrapy প্রক্সি: meta['proxy'], মিডলওয়্যার ক্রম এবং রোটেশন
Scrapy-তে অথেনটিকেটেড HTTP(S) প্রক্সি: request.meta['proxy'] সেট করুন, HttpProxyMiddleware (750)-এর আগে মিডলওয়্যার রাখুন, IP রোটেট ও ক্রলের গতি নিয়ন্ত্রণ করুন।
ফ্রি টুলস
আপনার টুলের চাহিদা অনুযায়ী প্রক্সি তালিকার ফরম্যাট পরিবর্তন করুন
ব্রাউজারেই ip:port:user:pass, user:pass@ip:port, http:// URL, SOCKS5 URI, JSON অ্যারে ও FoxyProxy ইমপোর্ট ফাইলের মধ্যে বাল্ক প্রক্সি তালিকা কনভার্ট করুন।
প্ল্যাটফর্ম অনুযায়ী প্রক্সি
SEO rank tracking প্রক্সি: স্থানীয় সার্চকারী যা দেখেন সেই ফলাফল পেজটি দেখুন
US, UK, ভিয়েতনাম, জাপানসহ আরও 4টি মার্কেটের প্রাইভেট IPv4 সহ SEO rank tracking প্রক্সি, যাতে র‍্যাংকিং, লোকাল প্যাক ও বিজ্ঞাপন স্থানীয়দের মতো দেখায়।
প্ল্যাটফর্ম অনুযায়ী প্রক্সি
Amazon সেলার প্রক্সি যা প্রতিটি অ্যাকাউন্টকে দেয় একটি স্থায়ী ঠিকানা
Seller Central, KDP ও Merch-এর Amazon সেলার প্রক্সি: অ্যাকাউন্টপ্রতি US স্ট্যাটিক ISP বা UK/Japan প্রাইভেট IPv4, যা শুধুই আপনার এবং রিনিউ করলেও একই থাকে।
IPV4 · united states
স্ক্র্যাপিং, র‍্যাঙ্ক ট্র্যাকিং এবং বিজ্ঞাপন যাচাইয়ের জন্য US প্রাইভেট IPv4 প্রক্সি পুল
US প্রাইভেট IPv4 প্রক্সি কিনুন: স্ট্যাটিক আমেরিকান ডেটাসেন্টার IP, একক গ্রাহক IP, আনলিমিটেড ব্যান্ডউইথ। স্ক্র্যাপিং, SERP ট্র্যাকিং ও US অ্যাড চেকের জন্য তৈরি।
IPV4 · vietnam
ভিয়েতনাম প্রাইভেট IPv4 প্রক্সি: একসাথে একাধিক অ্যাকাউন্টের প্রতিটির জন্য একটি নির্দিষ্ট IP
ভিয়েতনাম প্রাইভেট IPv4 প্রক্সি: স্ট্যাটিক ডেটাসেন্টার IP, গ্রাহকপ্রতি একটি, বাল্ক ব্যবহারে সাশ্রয়ী। সিডিং প্রোফাইল, সেকেন্ডারি Shopee শপ ও টুলের জন্য উপযোগী।