ProxyV4

Запуск кантэйнераў Docker праз HTTP-проксі з аўтарызацыяй

· Updated:

Налада проксі ў Docker пачынаецца з аднаго пытання: які трафік павінен ісці праз проксі? У Docker ёсць тры асобныя шляхі (ваша праграма падчас працы, docker build і дэман, які спампоўвае вобразы), і кожны з іх бярэ налады проксі з рознага месца. Наладзьце гэта правільна, і кожны кантэйнер на адным хосце зможа выходзіць у сетку праз свой уласны IPv4-адрас ад ProxyV4, не чапаючы табліцу маршрутызацыі хоста.

Docker · HTTP
ENV HTTP_PROXY=http://user:pass@ip:port HTTPS_PROXY=http://user:pass@ip:port
Прыватныя IPv4 (датацэнтр)
🇸🇬 Сінгапур
У наяўнасці
Ад
1,10 $ / IP / месяц
Зніжкі за аб'ём
  • 1 IP1,85 $
  • Ад 3 IP1,70 $
  • Ад 10 IP1,60 $
  • Ад 25 IP1,50 $
  • Ад 50 IP1,40 $
  • Ад 100 IP1,30 $
  • Ад 200 IP1,20 $
  • Ад 500 IP1,10 $
Купіць Сінгапур
Прыватныя IPv4 (датацэнтр)
🇺🇸 Злучаныя Штаты
У наяўнасці
Ад
1,10 $ / IP / месяц
Зніжкі за аб'ём
  • 1 IP1,85 $
  • Ад 3 IP1,70 $
  • Ад 10 IP1,60 $
  • Ад 25 IP1,50 $
  • Ад 50 IP1,40 $
  • Ад 100 IP1,30 $
  • Ад 200 IP1,20 $
  • Ад 500 IP1,10 $
Купіць Злучаныя Штаты
Проксі паводле платформаў:Airdrop & DePIN (Grass)Web Scraping & CrawlingSEO & SERP Tracking

Тры месцы, адкуль Docker бярэ налады проксі

Заданне зменнай у адной вобласці нічога не змяняе для астатніх дзвюх. Частая нечаканасць — калі docker pull працуе праз проксі, а праграма ўнутры кантэйнера ўсё яшчэ выходзіць у сетку з уласнага IP хоста, ці наадварот.

ТрафікДзе наладжвацьТыповае змесціва
Ваша праграма ўнутры запушчанага кантэйнераdocker run -e HTTP_PROXY=... альбо блок environment: у ComposeЗапыты скрапераў, выклікі API, задачы аўтаматызацыі
Каманды падчас docker build--build-arg HTTP_PROXY=http://user:pass@ip:portСпампоўванні apt, pip і npm на этапах RUN
Сам дэман Docker/etc/systemd/system/docker.service.d/http-proxy.confdocker pull і docker push для рэестраў

Адзін IP на кантэйнер

Паколькі зменныя асяроддзя часу выканання ізаляваныя ўнутры кожнага кантэйнера, на адным VPS можна запусціць, напрыклад, дзесяць воркераў, дзе кожны мае сваё значэнне http://user:pass@ip:port. У выніку кожны воркер паказвае сайтам свой уласны выхадны адрас, а паколькі прыватны IPv4 ад ProxyV4 выдаецца толькі аднаму кліенту, нічый чужы трафік не будзе ісці праз гэты адрас.

Выкарыстоўвайце асобны файл .env для кожнага сэрвісу альбо адзін сэрвіс Compose на кожны проксі, каб адразу бачыць, які IP прывязаны да якой задачы. Пры падаўжэнні арэнды адрасы застаюцца ранейшымі, таму нічога ў гэтых файлах мяняць не давядзецца.

Зменныя, якія забяспечваюць працу стэка

Калі пасля гэтых змен docker pull усё яшчэ злучаецца напрамую або кантэйнер не можа дастукацца да сваёй базы даных, старонка проксі не працуе паслядоўна разглядае кожны слой Docker.

  • Задайце імёны ў верхнім рэгістры (HTTP_PROXY, HTTPS_PROXY, NO_PROXY) і ў ніжнім рэгістры (http_proxy, https_proxy, no_proxy); розныя інструменты і асяроддзі выканання шукаюць рознае напісанне
  • Дадайце назву кожнага сэрвісу Compose, да якога звяртаецца ваша праграма, у NO_PROXY, напрыклад NO_PROXY=localhost,127.0.0.1,redis,postgres, каб трафік да базы даных і кэшу заставаўся ў сетцы bridge, а не накіроўваўся праз проксі
  • Выкарыстоўвайце схему http:// і для HTTPS_PROXY; кліент адкрывае тунэль CONNECT, і HTTPS-сайты застаюцца зашыфраванымі
  • Не запісвайце паролі ад проксі ў Dockerfile праз ENV: яны трапяць у слаі вобраза. Перадавайце іх падчас выканання з .env або з файла Compose

Крок за крокам

  1. 1

    Пераўтварыце радок замовы ў URL-адрас проксі

    У вашай замове ProxyV4 пазначаны фармат ip:port:user:pass; запішыце яго як http://user:pass@ip:port уручную або з дапамогай канвертара фарматаў проксі.

  2. 2

    Дадайце зменныя ў сэрвіс

    У docker-compose.yml у секцыі environment: патрэбнага сэрвісу прапішыце HTTP_PROXY, HTTPS_PROXY, http_proxy, https_proxy і NO_PROXY=localhost,127.0.0.1,redis,db.

  3. 3

    Перазапусціце кантэйнер

    Змены ў зменных асяроддзя ўжываюцца толькі да новых кантэйнераў, таму выканайце docker compose up -d, каб перастварыць сэрвіс.

  4. 4

    Праверце выхадны IP знутры

    Выканайце docker exec -it <container> curl -s https://proxyv4.com/api/my-ip. Атрыманы адрас павінен быць IP-адрасам проксі, а не хоста.

Частыя пытанні

Пасля дадання HTTP_PROXY мая праграма не можа падключыцца да Redis ці Postgres. Чаму?

HTTP-кліент цяпер адпраўляе запыты да redis або db на знешні проксі, які не можа вызначыць гэтыя ўнутраныя імёны. Пералічыце іх у NO_PROXY (і no_proxy), напрыклад NO_PROXY=localhost,127.0.0.1,redis,db, пасля чаго перазапусціце кантэйнер.

Ці можа кожны кантэйнер на адным серверы выкарыстоўваць свой проксі?

Так. Задайце кожнаму сэрвісу альбо кожнаму файлу .env уласнае значэнне http://user:pass@ip:port. Кантэйнеры выкарыстоўваюць адзін хост, але выходзяць у інтэрнэт з розных IP.

Навошта задаваць зменныя проксі двойчы, у верхнім і ніжнім рэгістрах?

Адзінага стандарту няма. Утыліты на базе libcurl чытаюць ніжні рэгістр http_proxy і https_proxy, тады як многія інструменты на Go і Node чытаюць назвы ў верхнім рэгістры. Заданне абодвух варыянтаў забяспечвае сумяшчальнасць з усім софтам у вобразе.

Ці выкарыстоўвае docker pull зменныя, зададзеныя ў Compose?

Не. Спампоўванне выконваецца дэманам, які счытвае налады проксі з канфігурацыі systemd /etc/systemd/system/docker.service.d/http-proxy.conf, а не з асяроддзя кантэйнераў.

Крыніцы

Асобны прыватны IPv4 для кожнага кантэйнера

Безлімітны прыватны IPv4 у 7 краінах, а таксама статычны ISP у ЗША і В'етнаме з аўтаматычнай выдачай пасля аплаты. Без мінімальнай замовы.

Паглядзець актуальныя цэны ў Сінгапуры

Related articles

Налада проксі
Налада проксі ва Ubuntu і Debian: крок за крокам па ўзроўнях
Наладзьце проксі з аўтарызацыяй для APT ва Ubuntu ці Debian, а таксама для shell, сэрвісаў systemd, sudo і GNOME. Гатовыя канфігі і каманды для праверкі.
Налада проксі
Выкарыстанне cURL з аўтарызаваным проксі: каманды для праверкі працы
Адпраўляйце запыты cURL праз аўтарызаваны HTTP(S)-проксі з -x і -U, правярайце выхадны IP, чытайце рукапацісканне CONNECT і вымярайце час запыту на любой АС.
Проксі паводле платформаў
Проксі для вэб-скрэйпінгу: фіксаваны пул IP з неабмежаваным трафікам
Проксі для вэб-скрэйпінгу на Python, Scrapy, Playwright і Selenium: пул прыватных IPv4 і статычных ISP-адрасоў, безлімітны трафік, фіксаваная цана за IP.
Проксі паводле платформаў
Проксі для Airdrop і Grass: асобны IPv4 для кожнага гаманца і вузла
Проксі для Airdrop і Grass: асобны IPv4 для кожнага гаманца і DePIN-вузла. Статычны ISP для Grass, Dawn і Nodepay; прыватны IPv4 для квэстаў і тэстнэтаў.
Проксі паводле платформаў
Проксі для SEO-трэкінгу: бачце старонку вынікаў такой, якой яе бачыць мясцовы карыстальнік
SEO-проксі з прыватнымі IPv4 у ЗША, Вялікабрытаніі, В'етнаме, Японіі і яшчэ 4 краінах: пазіцыі, лакальныя блокі і рэклама дакладна як у мясцовых жыхароў.
IPV4 · singapore
Прыватны IPv4-проксі Сінгапура: адзін фіксаваны IP на краму і рэкламны акаўнт
Прыватныя IPv4-проксі Сінгапура: статычны дата-цэнтр IP у адны рукі для крам Lazada і Shopee SG, сінгапурскіх рэкламных акаўнтаў і рэгіянальнай аўтаматызацыі.
IPV4 · united states
Пул прыватных IPv4-проксі ЗША для скрапінгу, адсочвання пазіцый і праверкі рэкламы
Купляйце прыватныя IPv4-проксі ЗША: статычныя IP дата-цэнтраў, адзін кліент на IP, безлімітны трафік. Для скрапінгу, адсочвання SERP і праверкі рэкламы.
Сцэнарыі выкарыстання
Праектаванне скрапера вакол пула выдзеленых IP
Кіраўніцтва для каманд працы з данымі: разлік пула прыватных статычных IP, ратацыя ва ўласным кодзе, выбар IPv4, ISP ці IPv6 і адказны збор даных.