Selenium WebDriver 與驗證 Proxy:實用可行方案
由 ProxyV4 工程團隊撰寫 · Updated:
Selenium 的 Proxy 驗證需要額外解法,因為 ChromeDriver 的 --proxy-server=http://ip:port 參數無法帶入帳號與密碼;Chrome 會自動忽略內嵌的 user:pass 並彈出 WebDriver 無法填寫的登入對話框。目前有兩種可靠解法:使用可在 Python 中處理 ProxyV4 登入的 selenium-wire,或是使用能以任何 Selenium 支援語言回應 onAuthRequired 的 Chrome 小型擴充功能。
http://user:pass@ip:port (selenium-wire / Chrome proxy extension)- 1 個 IPUS$1.85
- 3+ 個 IPUS$1.70
- 10+ 個 IPUS$1.60
- 25+ 個 IPUS$1.50
- 50+ 個 IPUS$1.40
- 100+ 個 IPUS$1.30
- 200+ 個 IPUS$1.20
- 500+ 個 IPUS$1.10
- 1 個 IPUS$2.25
- 3+ 個 IPUS$2.10
- 10+ 個 IPUS$2.00
- 25+ 個 IPUS$1.90
- 50+ 個 IPUS$1.80
- 100+ 個 IPUS$1.70
- 200+ 個 IPUS$1.60
- 500+ 個 IPUS$1.50
方案比較
| 方法 | 設定方式 | 適用情境 |
|---|---|---|
selenium-wire (Python) | seleniumwire_options={'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}} | Python 最快速的做法;可在瀏覽器開啟狀態下直接更換 Proxy |
| 驗證擴充功能 | 包含背景腳本以處理 chrome.webRequest.onAuthRequired 的 ZIP 封裝擴充功能 | 同樣適用於 Java、C#、Python 以及 undetected-chromedriver |
| 改用 Playwright | browser.newContext({ proxy: { server, username, password } }) | 新專案適用;內建支援 Proxy 登入,無需額外安裝擴充功能 |
單純使用 --proxy-server 會發生什麼事
Chrome 會從指令列讀取 Proxy 位址,但會忽略其中寫入的所有憑證資訊。當 Proxy 回應 407 時,Chrome 會開啟系統原生的登入提示視窗。該提示視窗存在於網頁 DOM 之外,因此 find_element 無法存取,指令碼將一直等待直到逾時。因此,所有可行的方案都必須透過此參數以外的途徑提供憑證。
請注意,selenium-wire 已不再積極維護。雖然它在許多環境中依然運作正常,但對於長期專案而言,採用擴充功能方案或 Playwright 是更穩健的選擇。
維持 Selenium 搭配 Proxy 運作的高效率
- 將
options.page_load_strategy = 'eager'設為就緒即繼續,讓指令碼在 DOM 準備完成後立即執行,無須等待載入緩慢的第三方腳本 - 在 Chrome 109 或更新版本進行無頭 (headless) 模式執行時,請使用
--headless=new;包含驗證擴充功能在內的擴充元件將能如一般視窗般正常運作 - 若僅需擷取價格或標題等純文字內容,可在 Chrome 偏好設定中關閉圖片載入
- 將
driver.quit()放入try / finally區塊中,避免程式異常崩潰時殘留 Chrome 背景處理程序
規模化部署前的注意事項
每個 WebDriver 工作階段都是一個完整的瀏覽器,因此如果網站會依位址關聯帳號,請為每個工作階段分配獨立的 IP。ProxyV4 專用 IPv4 僅出租給單一客戶,且續約時會保留原位址,可讓需長期運作的測試帳號維持使用相同的 IP。請先透過 代理檢測工具 檢查新代理,以免線路不良造成令人困惑的 Selenium 逾時錯誤。
如果執行時仍透過伺服器本身的 IP 開啟網頁,或卡在通道錯誤,代理無法運作 的 Selenium 章節中已依序列出常見原因。
步驟說明
- 1
安裝 selenium-wire
在您的虛擬環境中執行
pip install selenium-wire。 - 2
設定 Proxy 參數
根據您的 ProxyV4 訂單資料建立
sw_options = {'proxy': {'http': 'http://user:pass@ip:port', 'https': 'http://user:pass@ip:port'}}。 - 3
套用參數啟動 Chrome
從
seleniumwire匯入webdriver,並透過driver = webdriver.Chrome(seleniumwire_options=sw_options)建立驅動實例。 - 4
檢查出口 IP
呼叫
driver.get('https://proxyv4.com/api/my-ip')並確認頁面顯示正確的 Proxy 位址。
常見問題
為什麼 ChromeOptions 中的 --proxy-server=http://user:pass@ip:port 會被忽略?
這是 Chrome 本身的設計機制,會主動移除 --proxy-server 數值中的憑證資訊。請改由 selenium-wire、onAuthRequired 擴充功能提供憑證,或切換至原生支援直接輸入帳號密碼的 Playwright。
selenium-wire 能否在不重啟瀏覽器的情況下更換 Proxy?
可以。只要指派新的字典物件 driver.proxy = {'http': 'http://...', 'https': 'http://...'},後續的所有請求就會自動走新的上游 Proxy。
驗證擴充功能可以在 Chrome 無頭 (headless) 模式下運作嗎?
可以,請搭配 --headless=new 參數。舊版的 --headless 模式無法以相同方式載入擴充功能。
Selenium 透過 Proxy 連線每個頁面都逾時,該如何排查?
請使用相同的憑證以 cURL 載入該 IP 端點。若 cURL 同樣失敗,代表線路或連接埠存在問題;您可以參考 Proxy 逾時疑難排解指南 查看具體檢查項目。
資料來源
為 Selenium 工作階段提供穩定 IP
涵蓋 7 國專屬 IPv4 與美越靜態 ISP,支援帳號密碼驗證、不計流量且每組 IP 僅供單一客戶專用。
查看美國即時價格