Почему HTTPS-прокси не видит трафик приложения

Прокси настроен, сертификат установлен, а запросов приложения нет или они обрываются на TLS. Шесть сценариев со схемами на сетевом уровне и тем, как каждый выглядит в перехватчике.

1. Приложение вообще не использует прокси и устанавливает соединение напрямую

Самый простой и очень частый случай. Приложение либо полностью игнорирует системные настройки прокси, либо использует собственный HTTP-клиент, который читает прокси только из переменных окружения или собственной конфигурации.

Типичные примеры:

  • Flutter (часто игнорирует системный прокси);
  • кастомные реализации на OkHttp / URLSession с особыми конфигурациями;
  • приложения, которые проверяют наличие специальной переменной (типа HTTP_PROXY в Linux) и отказываются так работать.

Тут мало что можно сделать, разве что в случае кастомных реализаций делать специальные сборки для работы через внешние прокси.

Схема: приложение отправляет TCP SYN и TLS ClientHello сразу серверу, прокси в установке соединения не участвует

В приложении перехватчика в этот момент виден только чужой трафик (браузер, другие приложения), а нужного приложения в списке нет.

В Solpuga с фильтром httpbin.org один GET-запрос от Safari, а Flutter-приложение рядом получило HTTP 200 мимо прокси

Прошёл запрос только из Safari

2. Приложение использует прокси, но не доверяет его сертификату

Трафик доходит до прокси, но TLS-рукопожатие падает, потому что приложение (или система) не доверяет его корневому сертификату.

Прокси-сервер для каждого имени хоста генерирует на лету конечный (leaf) сертификат и подписывает его своим собственным корневым центром сертификации. Приложение принимает подменный сертификат, только если корневой сертификат прокси-сервера находится в хранилище доверенных сертификатов, к которому оно фактически обращается.

На устройстве могут быть системное хранилище и отдельное пользовательское. На Android 7+ приложения по умолчанию доверяют только системному хранилищу, а на iOS профиль конфигурации должен быть помечен как полностью доверенный; в противном случае сертификат устанавливается, но игнорируется.

В этом случае можно попробовать добавить корневой сертификат в системное хранилище или разрешить в приложении обращение к пользовательскому, если это возможно.

Схема: после CONNECT прокси отвечает на ClientHello сертификатом, подписанным его корневым CA, приложение шлёт alert unknown ca, и рукопожатие обрывается

Safari в симуляторе iOS пишет «Это подключение не защищено», в Solpuga CONNECT к httpbin.org:443 с ошибкой TLS «tls handshake eof»

Появляется попытка соединения, которая сразу заканчивается ошибкой TLS

3. TLS-рукопожатие начинается, но SSL Pinning прерывает его до установки соединения

SSL Pinning — распространённая практика в приложениях, которые работают с чувствительными данными. Во время соединения, после обычной проверки цепочки сертификатов, приложение дополнительно проверяет открытый ключ сервера (или весь сертификат) на соответствие жёстко зашитому в код значению (SPKI pin / certificate pin). Поддельный же конечный сертификат содержит открытый ключ прокси-сервера, а не реального сервера. Даже если система полностью доверяет корневому центру сертификации прокси-сервера, проверка не проходит, и соединение так и не устанавливается.

Схема: проверка цепочки сертификатов проходит, проверка пина SHA-256 SPKI не проходит, и приложение отправляет прокси alert о несовпадении пина

В интерфейсе это выглядит почти так же, как в предыдущем случае: короткоживущий запрос с ошибкой TLS. Разница только в содержании ошибки и в том, что система сертификату доверяет, а приложение — нет.

Демо на Android: обычный запрос получил HTTP 200, запрос с пиннингом упал с SSLPeerUnverifiedException, а в Solpuga у его CONNECT ошибка «Клиент закрыл соединение»

Два запроса на один и тот же URL: один прошёл нормально, а второй упал с ошибкой

4. Приложение использует собственный TLS-стек или отдельное хранилище сертификатов

Некоторые приложения не используют системный TLS и системное хранилище сертификатов. Они либо:

  • используют собственный BoringSSL / OpenSSL / mbedTLS,
  • либо имеют встроенное хранилище доверенных сертификатов,
  • либо реализуют pinning на уровне своего стека.

Например, Firefox на Linux может потребовать отдельного импорта корневого сертификата через свои настройки в своё хранилище. В этом случае даже правильно установленный системный корневой сертификат прокси ничего не даёт.

Схема: собственный TLS-стек приложения проверяет сертификат сервера по своему хранилищу CA и пинам, системное хранилище не используется

В этом случае запросы могут проходить частично либо не проходить вовсе. Например, здесь сертификат установлен, запросы Curl и Lynx бегают, а Firefox артачится:

Solpuga в Linux: запросы curl и lynx получают 200, а CONNECT от Firefox к httpbin.org:443 падает с «received fatal alert: BadCertificate»

Упал именно HTTPS-запрос

5. Разные части приложения используют разные сетевые библиотеки и каналы связи

Очень частый случай в больших приложениях. Основной функционал ходит через один HTTP-клиент (который «уважает» прокси), а аналитика, пуши, веб-сокеты, загрузка изображений, платёжный SDK — через другой сетевой стек.

В результате часть запросов видна, а часть нет.

Схема: основной HTTP-клиент приложения идёт через прокси, аналитика и загрузка изображений ходят напрямую, а WebSocket — через свой стек

6. Приложение использует протокол или транспорт, который не поддерживается конкретным прокси-приложением

Даже если приложение поддерживает работу через прокси-сервер и не использует pinning, оно может использовать протокол, который конкретный прокси плохо или совсем не поддерживает.

HTTP/2 требует полноценной поддержки бинарного формата данных и синхронизации для stateful HPACK. Многие прокси пропускают только HTTP/1.1 и теряют часть запросов.

HTTP/3 / QUIC работает поверх UDP. Классические дебаг-прокси почти всегда TCP-only. Если сеть разрешает UDP/443, клиент устанавливает QUIC напрямую, минуя прокси.

Схема: прокси слушает только TCP, приложение проводит QUIC-рукопожатие с сервером по UDP/443, и прокси трафика не видит

В TCP-прокси такой трафик просто отсутствует либо трансформируется в HTTP/1, если источник поддерживает несколько типов соединения (заголовок alt-svc):

В Solpuga запрос Chrome к quic.nginx.org по HTTP/1.1, в исходном ответе заголовок alt-svc: h3=":443"

Ответ доступен по HTTP/3, но тут мы видим HTTP/1.1

Заключение

Выше были разобраны самые распространённые случаи игнорирования прокси приложениями. Список наверняка не полный, могут быть более экзотичные кейсы. Поэтому важно понимать, как устроены сетевые механизмы в тестируемом приложении и почему именно так. Далеко не всегда отсутствие трафика в перехватчике есть признак бага, иногда это особенности архитектуры или ограничения инструмента.

Посмотреть в Solpuga

Рядом