Клиент жмёт Enter. Сайт видит чужой IP. Ответ приходит на 40-80 мс позже, чем мог бы. Между этими событиями стоит прокси - и работает он не так, как рисуют на корпоративных презентациях, где посередине всегда красивый прямоугольник и две стрелочки.
Я гоняю прокси через свои проекты лет семь: парсеры, рекламные кабинеты, тесты гео, антифрод. Когда кто-то говорит «прокси же просто пересылает трафик», у меня дёргается глаз. Пересылает. Но перед этим делает ещё десяток вещей, от которых зависит, увидит ли сайт ваш реальный IP.
Прокси это не «сервер посередине», а подмена отправителя
Формально всё просто. Клиент устанавливает соединение с прокси и просит соединить его с нужным сайтом. Прокси принимает запрос, меняет IP-адрес источника и заголовки, отправляет дальше от своего имени. Сайт отвечает прокси, тот пересылает ответ клиенту. Три шага, доли секунды.
Вся магия в деталях. Прокси может подменить только IP. Может добавить X-Forwarded-For - и сайт узнает, что за прокси стоит живой человек с конкретным адресом. Может не добавлять ничего. Может работать на уровне TCP и вообще не понимать, что внутри HTTP. От этих нюансов зависит, будет трафик анонимным или просто «с другим IP».
Аналогия с почтой. Вы отдаёте письмо курьеру, он несёт его в офис, получает ответ и возвращает вам. Получатель видит подпись курьера, а не вашу. Но болтливый курьер расскажет, от кого письмо. Прокси - это курьер. Насколько он болтливый, зависит от типа и настроек.
Что происходит с пакетом за 200 миллисекунд
Считаем по шагам. Без этого не разобраться, откуда на дешёвом узле берутся лишние 500 мс.
- Клиент открывает TCP-соединение с прокси. Один round-trip: 10-30 мс, если узел в том же регионе. И 150-180 мс, если между вами половина планеты.
- Устанавливается TLS, если это HTTPS. Ещё один-два round-trip на handshake, плюс 40-100 мс.
- Клиент отправляет запрос: метод, путь, заголовки. Прокси читает и применяет правила - авторизацию, фильтрацию, замену заголовков.
- Прокси открывает соединение с целевым сервером. Есть пул живых соединений - шаг занимает единицы миллисекунд. Нет - ещё один полный handshake.
- Целевой сервер отвечает. Прокси транслирует ответ обратно, по пути может его кэшировать, сжимать или модифицировать.
Вот почему «просто прокси» на дешёвом железе добавляет 300-500 мс к каждому запросу. Нормальный узел с keep-alive и пулом соединений - 30-60 мс. Разница в десять раз. Она чувствуется не только в браузере, но и в деньгах, когда вы парсите миллион страниц.
Прямой и обратный прокси путают даже сеньоров
Прямой прокси стоит между внутренними клиентами и внешним интернетом. Он принимает запросы от вас, решает, стоит ли их пропускать, и обращается к внешним ресурсам от вашего имени. Классика - корпоративная сеть, где весь офисный трафик идёт через один узел с аутентификацией и логированием. Админ видит, кто куда ходил, и централизованно рубит лишнее.
Обратный прокси стоит с другой стороны. Он принимает запросы из интернета и распределяет их по внутренним серверам. Клиент думает, что общается с одним сайтом, а запрос уходит на один из десяти бэкендов. Здесь балансировка нагрузки, фильтрация запросов и терминация HTTPS - расшифровка трафика на входе, чтобы серверы приложений не жгли CPU на шифрование.
Практическая разница огромная. Прямой прокси защищает ваши исходящие соединения и IP сотрудников. Обратный - инфраструктуру от входящего трафика и держит нагрузку. Путать их в проектной документации - моветон. Я видел такое в ТЗ от компаний с миллиардным оборотом, где обратный прокси назвали «выходным шлюзом» и полгода искали в нём утечку исходящего трафика.
HTTP, HTTPS и SOCKS5 - три разных характера
HTTP-прокси понимает протокол прикладного уровня. Он читает заголовки, может их менять, кэшировать ответы, фильтровать по URL. Для обычного HTTP трафик идёт открытым - прокси видит всё. Для HTTPS он работает как туннель: клиент говорит «соедини меня с сайтом через CONNECT», дальше прокси перегоняет зашифрованные байты, не понимая, что внутри. Многие думают, что HTTPS-прокси видит их пароли. Не видит, если это честный туннель без подмены сертификата.
SOCKS5 работает на уровне сессии, ниже прикладного. Ему всё равно, что вы гоните - HTTP, FTP, игровой трафик, торренты. Заголовки он не читает и не кэширует, просто устанавливает соединение и перегоняет байты. За счёт этого быстрее и универсальнее, но фильтровать по содержимому не умеет. Для парсинга и автоматизации чаще берут именно SOCKS5.
MTProto - отдельная история для Telegram. Это не прокси в классическом смысле, а протокол шифрования, который позволяет клиенту соединяться с серверами мессенджера через промежуточный узел. Свои ключи, свои сессии, своя логика. В двух абзацах его не объяснить, но архитектурно задача та же: трафик идёт через посредника, и конечный сервер видит посредника.
Прозрачный прокси: когда он есть, но вы его не видите
Прозрачный прокси не требует настроек на клиенте. Весь трафик с порта устройства перенаправляется на порт прокси через статические маршруты на самом устройстве или на роутере. Вы ничего не настраивали, а трафик уже идёт через посредника.
При этом данные пользователя он не меняет и IP не скрывает. Его задача - кэширование и экономия трафика, а не анонимность. Провайдеры любят такие штуки для экономии аплинка, корпоративные сети - для фильтрации. Если сайт показывает ваш реальный IP, а трафик при этом странно медленный, возможно, вы уже за прозрачным прокси и просто об этом не знаете.
Зачем бизнесу собственный прокси-узел
Публичные бесплатные прокси - лотерея. Половина не работает, четверть логирует трафик, оставшиеся либо медленные, либо уже в чёрных списках у антифрод-систем. Я не раз видел, как команда строит парсер на бесплатных узлах, а через час удивляется, что все запросы возвращают 403.
Свой узел или арендованный пул решает три задачи сразу. Первая - предсказуемая скорость: вы знаете, где стоит сервер, сколько у него канала и какой пинг до целевых ресурсов. Вторая - контроль над репутацией IP: вы не делите адрес с тысячей других пользователей, которые уже успели наследить. Третья - управляемость: логи, ротация, лимиты, авторизация по логину и паролю.
Для команд, которым нужен пул под конкретную задачу, проще взять готовый каталог, чем собирать инфраструктуру с нуля. Я обычно смотрю в сторону каталога прокси 3seller - там есть residential, датацентровые и мобильные варианты под разные сценарии. Когда нужно за день поднять тест на десять гео, готовый пул экономит два дня работы.
Где прокси реально экономит деньги
Первый сценарий - реклама. Чтобы проверить, как объявление выглядит в Германии, Бразилии и Японии, не нужно летать в три страны. Нужен прокси в каждой гео и чистый браузерный профиль. Иначе алгоритмы покажут вам не то объявление, которое видит реальный пользователь, а то, которое считают релевантным для вашего IP.
Второй - парсинг цен и ассортимента. Маркетплейсы отдают разные цены разным регионам и разным типам пользователей. Без прокси вы спарсите одну витрину и построите на ней аналитику, которая к реальности отношения не имеет. С пулом адресов картина становится честной.
Третий - тестирование собственных продуктов. Гео-зависимые фичи, локализация, платёжные сценарии, A/B-тесты. Прокси воспроизводит окружение пользователя без VPN и танцев с бубном вокруг DNS.
Четвёртый - безопасность. Публичный Wi-Fi в аэропорту, командировка, конференция. Трафик через доверенный узел с шифрованием - базовая гигиена. Стоит копейки по сравнению с утечкой корпоративной почты.
Кэширование и сжатие: бонус, о котором забывают
Хороший прокси не просто пересылает байты. Он держит кэш ответов и отдаёт повторные запросы из памяти. Для статики это десятки процентов канала, для API - миллисекунды. Обратный прокси с кэшем перед посещаемым сайтом снижает нагрузку на бэкенд в разы. Дешевле, чем добавлять ещё три сервера приложений.
Сжатие работает там же. Gzip или Brotli на выходе уменьшают объём ответа в 3-5 раз. Для мобильного пользователя с плохим каналом это разница между «сайт открылся» и «сайт не открылся». Настройка занимает пару строк в конфиге, эффект виден в метриках сразу.
Логирование: кто и что видит
Прокси по природе видит больше, чем обычный роутер. Он знает, к какому домену вы шли, когда и с какими заголовками. Для HTTPS содержимое скрыто, но метаданные остаются. Поэтому доверенный узел - это не только про скорость, но и про то, кто держит логи и сколько времени их хранит.
В корпоративной сети логирование обязательно: без него нет ни аудита, ни разбора инцидентов. В личных сценариях выбирайте провайдера, который прямо заявляет политику хранения и не продаёт данные третьим лицам. Нет ни слова про логи в описании каталога - задайте вопрос до покупки, а не после.
Парсинг: почему без прокси он умирает на третьей тысяче запросов
Серьёзная антифрод-система смотрит не только на IP. Она собирает отпечаток: заголовки, TLS-фингерпринт, порядок заголовков, куки, поведение мыши, тайминги. Но IP - первый фильтр. Если с одного адреса прилетает пять тысяч запросов в минуту, дальше можно не анализировать.
На Reddit в тредах про парсинг постоянно всплывает один и тот же нюанс: люди меняют адрес каждые 30 секунд, ловят бан и не понимают почему. А всё потому, что отпечаток браузера остался прежним и антифрод склеил сессии по нему, а не по IP.
Рабочая связка выглядит так: пул прокси плюс ротация плюс реалистичные задержки. Пул на 500 адресов с ротацией раз в 10-15 минут держит сотни тысяч страниц в сутки. Пул на 50 адресов сдохнет за час, и вы будете думать, что проблема в парсере, а не в инфраструктуре.
Отдельная боль - гео-привязка. Сайт отдаёт контент только для США, а ваш прокси числится в Нидерландах - получите заглушку или редирект. В каталоге смотрите не только на количество адресов, но и на разбивку по странам и городам. 3seller.com/proxy как раз даёт фильтры по гео и типу прокси, что экономит время на подбор.
Настройка в браузере: куда нажимать
В Chrome и большинстве браузеров настройки живут в системных параметрах ОС. Windows: Параметры - Сеть и Интернет - Прокси - Ручная настройка. Вводите адрес узла и порт, при необходимости логин и пароль. macOS: Системные настройки - Сеть - активное подключение - Дополнительно - Прокси. Linux: настройки сети в GNOME или переменные окружения http_proxy и https_proxy в терминале.
Firefox исторически держит свои настройки отдельно: Настройки - Основные - Настройки сети - Настроить. Удобно, когда нужно гонять через прокси только один браузер, а остальная система работает напрямую.
Расширения для управления прокси удобны, но требуют доверия. Ставить непроверенное расширение с доступом ко всему трафику браузера - сомнительная идея. Если нужен именно браузерный сценарий, поднимите отдельный профиль и настройте прокси на уровне системы или через отдельный инстанс браузера.
Telegram и WhatsApp: где именно живут настройки
В Telegram прокси настраивается в разделе Данные и память - Прокси. Добавляете узел, указываете тип: SOCKS5 или MTProto, адрес, порт, логин и пароль, если требуется. Приложение само проверит соединение и покажет пинг. Включить можно точечно, отдельным тумблером: рабочий аккаунт через один узел, личный через другой.
WhatsApp встроенной настройки не даёт. На Android трафик заворачивается на уровне системы: Настройки - Сеть и Интернет - Wi-Fi - нужная сеть - Дополнительно - Прокси. На iOS аналогично в настройках Wi-Fi соединения. Дальше мессенджер просто использует системное соединение и не знает, что оно идёт через посредника.
Нюанс, о котором забывают: мобильные приложения могут игнорировать системный прокси, если разработчик явно отключил такое поведение. Не идёт WhatsApp через прокси - проверьте, не включён ли режим экономии трафика или корпоративный профиль MDM, который переопределяет настройки сети.
Пять ошибок, которые я вижу чаще всего
Первая - брать бесплатные прокси для продакшена. Это как ездить на такси без тормозов: до первой поездки. Вторая - не проверять реальный IP после подключения. Подключились, а трафик всё равно идёт напрямую из-за кривого правила в системе или бага в расширении.
Третья - смешивать прокси и VPN в голове. VPN шифрует весь трафик устройства и меняет IP целиком, прокси работает точечно, на уровне приложения или протокола. Для парсинга нужен прокси, для защиты всего трафика в кафе - VPN. Иногда их комбинируют, но это отдельная история.
Четвёртая - игнорировать DNS. Прокси настроен, а DNS-запросы уходят напрямую к провайдеру, и вы сливаете список посещаемых сайтов. Нормальный клиент умеет гнать DNS через туннель, но это надо проверить отдельно.
Пятая - не следить за репутацией IP. Адрес может быть чистым при покупке и стать грязным через неделю, если им пользовались для спама. Проверка на утечки и чёрные списки - регулярная процедура, а не разовая.
Как выбрать прокси под задачу, а не под ценник
Для парсинга и автоматизации берите датацентровые: быстрые и дешёвые, но легче палятся. Для соцсетей и рекламных кабинетов - residential, они выглядят как домашние пользователи. Для мобильных сценариев - мобильные прокси, дороже и медленнее.
Смотрите на три параметра: скорость отклика, стабильность соединения, гео-покрытие. Цифра «100 000 IP» ничего не значит, если половина адресов мертва или сидит в одной стране. Нормальный каталог показывает фильтры по стране, городу и типу, а не только общее количество.
Прокси - это инфраструктура, а не волшебная кнопка. Он не сделает парсер умнее, не заменит задержки между запросами и не решит капчу. Зато снимет с вашего реального IP нагрузку, которую тот не должен нести, и даст контроль над тем, как вас видят снаружи.
Начните с малого: возьмите десять адресов под конкретную задачу, прогоните тест на скорость и стабильность, проверьте, какой IP видит целевой сайт. Результат устраивает - масштабируйте. Каталог 3seller.com/proxy удобен тем, что можно собрать небольшой пул под тест и расширить его, когда станет понятно, что схема работает.