ProxyV4

Webスクレイピング用プロキシ:トラフィック無制限の固定IPプール

Updated:

ギガバイト単位で課金されるWebスクレイピング用プロキシは、ページ容量が増えるたびにクローラーの運用コストが高くなります。そのため、定期的に巡回するクローラーには、トラフィック無制限の固定IPプールを利用するほうが安価です。ProxyV4は7カ国の専用IPv4と、米国・ベトナムの静的ISPを販売しており、すべてトラフィック無制限のIP単位定額制です。ターゲットが許容する1秒あたりのリクエスト数に応じてプールサイズを調整でき、ページ容量が増えても請求額は変わりません。

専用IPv4(データセンター)
🇺🇸 United States
在庫あり
〜から
$1.10 / IP / 月
数量割引
  • 1 IP$1.85
  • 3個以上のIP$1.70
  • 10個以上のIP$1.60
  • 25個以上のIP$1.50
  • 50個以上のIP$1.40
  • 100個以上のIP$1.30
  • 200個以上のIP$1.20
  • 500個以上のIP$1.10
United Statesを購入
専用IPv4(データセンター)
🇻🇳 ベトナム
在庫あり
〜から
$1.10 / IP / 月
数量割引
  • 1 IP$1.85
  • 3個以上のIP$1.70
  • 10個以上のIP$1.60
  • 25個以上のIP$1.50
  • 50個以上のIP$1.40
  • 100個以上のIP$1.30
  • 200個以上のIP$1.20
  • 500個以上のIP$1.10
ベトナムを購入

クローラーにおけるIP単位課金とGB単位課金の比較

比較項目固定プール(IP単位)従量課金(GB単位)
コストを左右する要因IP数とレンタル期間HTML、JS、アセットを含むダウンロード容量
ページの容量が増加した場合影響なし(帯域幅は無制限)容量に応じて請求額が増加
スループットの制限要因各ターゲットのIP単位のレート制限予算
スケール方法IPを追加(数量に応じてIP単価が割引)トラフィックを追加購入

スクレイパーがブロックされる理由とIPプールによる変化

カタログ、一覧ページ、公開APIのスクレイピングにおいて、ブロックされる主な原因は「誰か」ではなく「リクエストの頻度」です。1つのアドレスがサイトのリクエストレート制限を超えるとHTTP 429が返されます。10〜100個の静的IPプールを用意し、各IPの同時接続数を控えめに維持することで、各アドレスをしきい値未満に保ちつつ、クローラー全体として必要な速度で実行できます。

シングルテナンシー(専用利用)も効果的です。ProxyV4の各IPはレンタル期間中1人の顧客に専任で割り当てられるため、ターゲットサイトがそのアドレスで記録するリクエスト履歴はあなただけのものです。

ターゲットに合わせたプールの選定

  • 公開カタログや大量リクエストのAPI:IP単価が最も安い米国またはシンガポールの専用IPv4
  • ベトナムのECサイトやローカルポータル:国内向けページや現地価格を取得できるベトナムIPv4
  • WAFによってホスティングASNを遮断するターゲット:一般消費者向けISPに登録されており、Cloudflareのチャレンジを受けにくい米国またはベトナムの静的ISP
  • リクエストごとに新しいIPが必要なターゲット:ローテーティングベトナムプロキシは現在未発売です。ローテーティングベトナムプロキシのページでウェイトリストを受け付けています

静的プールを長持ちさせるクローラーの設定

すべての回線で標準的な認証情報を使用するため、Pythonでのプロキシ設定は proxies = {"http": "http://user:pass@ip:port", "https": "http://user:pass@ip:port"} と記述するだけです。

  • リスト全体でリクエストをラウンドロビン方式で割り当て、ターゲットドメインごとにIPあたり約2〜5秒のランダムなジッター(ゆらぎ)を追加する
  • requests.Session()やプーリング対応クライアントで接続を再利用し、リクエストごとのTLSハンドシェイクのオーバーヘッドを防ぐ
  • PlaywrightやPuppeteerでは、パースしない画像、フォント、メディアをブロックする
  • IPがHTTP 429または503を受け取った場合は、即座に再試行せず、ローテーションから外してクールダウンさせ、バックオフを行う

設定手順

  1. 1

    ターゲットに合わせた規模のプールを購入

    米国、日本、英国のIPv4など、国ごとの数量を選択します。数量が増えるとボリュームディスカウントが自動的に適用されます。

  2. 2

    リストをURL形式に変換

    ip:port:user:pass の行をプロキシフォーマット変換ツールに貼り付け、http://user:pass@ip:port の文字列またはJSONを取得します。

  3. 3

    フレームワークにプールを組み込む

    Python Requests、Scrapy、Selenium、またはNode.js Axiosの設定手順ページをご利用ください。

  4. 4

    初回の本格実行前に測定

    プロキシスピードテストで応答時間を確認し、ターゲットへの接続が遅い回線を除外します。

よくある質問

ProxyV4プロキシでのスクレイピングトラフィックは従量課金制ですか?

いいえ。専用IPv4および静的ISPは、帯域幅無制限のレンタル期間に応じたIP単位の定額制です。

1つの静的IPで1日に何ページ取得できますか?

ターゲットのレート制限によって異なります。ドメインあたり毎分1〜3リクエストの場合、1つのIPで検知されることなく1日あたり約1,500〜4,000ページを取得できます。

スクレイピング用のローテーティングプロキシは販売していますか?

現在は未発売です。ローテーティングベトナムプロキシはウェイトリストのみの受付となっています。当面は、ラウンドロビン割り当てを用いた静的プールでも、大半の定期クローラーで同様の役割を果たせます。

50個のプロキシを素早くScrapy形式に変換するにはどうすればよいですか?

プロキシフォーマット変換ツールに貼り付けてください。ブラウザ上で ip:port:user:pass の行がURL文字列やJSON配列に変換されます。

月額定額でスクレイピング用プールを構築

7カ国の専用IPv4と米国・ベトナムの静的ISPを、トラフィック無制限のIP単位定額制で提供します。

米国IPv4の最新価格を確認

Related articles

活用事例
専用IPプールを活用したスクレイパーの設計
データチーム向け計画ガイド:専用静的IPプールの規模設計、独自コードでのローテーション、IPv4・ISP・IPv6の選定、責任あるデータ収集の実践方法を解説します。
プロキシ設定
認証付きプロキシ経由でPython requestsを使う手順
認証付きHTTP(S)プロキシ経由でPythonリクエストを送信:proxies辞書の作成、Sessionへの適用、特殊文字パスワードのエンコード、リストのローテーション、IP確認まで解説。
プロキシ設定
Playwrightのプロキシ認証:コンテキストごとに1つの固定IPを設定
Playwrightの各コンテキストに認証付きHTTP(S)プロキシを個別に割り当て、IPに応じたタイムゾーン設定と出口IP確認を行う方法を解説。
プロキシ設定
Scrapyプロキシ:meta['proxy']、ミドルウェアの順序、ローテーション
Scrapyで認証付きHTTP(S)プロキシを設定:request.meta['proxy']の設定、HttpProxyMiddleware (750)前の配置、IPローテーションとクロール速度調整。
IPV4 · united states
スクレイピング・順位追跡・広告チェック向け米国専用IPv4プロキシプール
米国専用IPv4プロキシの購入:固定アメリカデータセンターIP、1ユーザー専任割当、データ容量無制限。スクレイピング、SERP順位追跡、米国の広告検証向けに構築。
IPV4 · vietnam
ベトナム専用IPv4プロキシ:大量アカウントに1アカウント1固定IP
ベトナム専用IPv4プロキシ:1ユーザー独占の固定データセンターIPを大口向け低価格で提供。シーディング用アカウント、Shopeeサブ店舗、自動化ツールに最適です。
ISP · united states
米国静的ISPプロキシ:変わらない住宅登録IP
一般向けプロバイダ登録IPによる米国静的ISPプロキシ。Amazon出品者、広告アカウント、Instagram向けに固定の米国IPを提供します。
プロキシ設定
Selenium WebDriverと認証プロキシ:確実に動作する設定方法
ChromeDriverのSeleniumプロキシ認証:--proxy-serverがuser:passを無視する理由、selenium-wireやonAuthRequired拡張での解決とIP確認。