Как снизить трафик автоматизации браузера с помощью перехвата запросов
TL;DR
Используйте перехват запросов Playwright в авторизованном приложении, чтобы заблокировать проверенный необязательный ресурс.
Зарегистрируйте маршрут перед навигацией и сопоставьте самый маленький стабильный диапазон, например, один точный URL-адрес актива.
Сохраняйте скрипты, API-запросы, основные стили и любые ресурсы, необходимые для запланированной функции.
Сравните одно и то же утверждение о приемлемости приложения до и после маршрутизации, затем отдельно проверьте фактическое использование провайдера.
Маршрутизация может повлиять на кэширование, а сервисные работники изменяют, какие запросы может наблюдать маршрут.
Удалите маршрут и слушатели после выполнения и остановите управляемый браузер, если ваша работа владет им.
Когда перехват запросов Playwright уменьшает трафик браузера?
Перехват запросов Playwright может уменьшить трафик, когда браузер отменяет запросы на ресурсы, которые авторизованная задача не использует. Хорошими кандидатами являются декоративные изображения или лишние ресурсы в вашем собственном приложении. Начните с одного пути и докажите, что задача все еще достигает своего приемлемого результата. Nstdata Cloud Browser.
Фоновое изображение может быть необязательным в ориентированном на данные процессе подтверждения и необходимым в случае визуального QA. Большие запросы также могут служить нескольким целям. Перед блокировкой категории проверьте, поддерживает ли ресурс доступность, компоновку, инициализацию приложения, проверку или артефакт, который вы намерены сохранить. Рассматривайте зависимости как поведение продукта и проверяйте их на странице, с которой вы работаете.
В примере используется каталог тестирования, который загружает одно декоративное SVG. Ожидаемым бизнес-сигналом является заголовок Каталог готов. Базовая версия должна предоставить SVG. Обработка должна отменить этот точный запрос изображения. Оба запуска все еще должны сообщать ожидаемый заголовок.
Какие ресурсы следует оставить в покое?
Оставьте ресурсы в покое, когда их роль неясна или когда они влияют на бизнес-задачу. Сначала используйте точный маршрут. Более широкие фильтры требуют более крупной выборки регрессии и четкой ответственности за то, что изменилось.
Одно декоративное изображение на принадлежащей странице
Кандидат после проверки
Может ли запланированное содержимое все еще отображаться и читаться?
Скрипт или модуль приложения
Сохранить
Инициализирует ли он элементы управления или данные, используемые задачей?
Вызов API для строк результата
Сохранить
Может ли существовать приемлемый результат без его ответа?
Таблица стилей или шрифта
Сохранить для визуального QA
Изменит ли блокировка его компоновку или измерение текста?
Встроенное видео
Зависит от задачи
Является ли воспроизведение частью условия приемлемости?
Запросы на вход или безопасность
Сохранить
Требует ли приложение их для авторизованного доступа или целостности?
Если вы должны существенно уменьшить объем изображений, сначала изучите роль каждой группы изображений и задачи браузера. Точный маршрут предлагает вам небольшое, четко определенное экспериментирование. Всегда продолжайте запросы вне этого диапазона. Playwright поддерживает сопоставления URL и различные действия перехвата. Руководство по сети Playwright.
Как сравнить базовую линию и один маршрут?
Запустите одно и то же утверждение страницы дважды и сравните наблюдаемую доставку для одного известного актива. Используйте Node.js 22.12 или новее и установите playwright-core@1.65.1. Для локального запуска установите Chromium с помощью npx playwright-core install chromium. Для управляемой маршрутизации разверните одобренную тестовую страницу, где удаленный браузер может к ней получить доступ.
Шаг 1. Начните воспроизводимую цель
Сохраните fixture.mjs и запустите node fixture.mjs. Тестовая страница находится по адресу /catalog, а необязательный ресурс — по адресу /assets/decorative.svg. Используйте точный путь, адаптируя тест к принадлежащему приложению для тестирования. У фикстуры нет внешних зависимостей.
Сохраните общие модули подключения ниже. Локальный запуск использует изолированный Chromium. Для управляемого запуска запустите Cloud Browser → Playground, затем установите NSTDATA_API_KEY, NSTDATA_SESSION_ID и любые применимые NSTDATA_TEAM_ID. Используйте одобренную промежуточную конечную точку. Этот путь требует ваших собственных готовых учетных данных сеанса и рабочего пространства. Логика маршрутизации и приема была проверена локально. Смотрите подключение Playwright с CDP.
const root ='https://api.nstdata.io/api/v1/cloud-browser';exportasyncfunctionapi(method, path, body){const key = process.env.NSTDATA_API_KEY;if(!key)thrownewError('Set NSTDATA_API_KEY');const headers ={'x-api-key': key };if(process.env.NSTDATA_TEAM_ID) headers['x-team-id']= process.env.NSTDATA_TEAM_ID;if(body) headers['content-type']='application/json';let response;try{ response =awaitfetch(root + path,{ method, headers,redirect:'error',body: body ?JSON.stringify(body):undefined,signal:AbortSignal.timeout(20_000),});}catch{throwObject.assign(newError('API transport failed; reconcile the original operation'),{retryable:true});}const retryable = response.status===429|| response.status>=500;let result;try{ result =await response.json();}catch{throwObject.assign(newError('Invalid API JSON'),{ retryable });}if(!response.ok|| result.err===true|| result.success===false){throwObject.assign(newError(`Cloud Browser API HTTP ${response.status}`),{ retryable });}if(!result.data)thrownewError('Missing API data');return result.data;}exportasyncfunctionconnection(id){if(!id)thrownewError('Set NSTDATA_SESSION_ID');const path =`/sessions/${encodeURIComponent(id)}`;const session =awaitapi('GET', path);if(session.state!=='ready')thrownewError(`Session is ${session.state}, not ready`);const c =awaitapi('POST', path +'/automation-credentials');if(c.sessionId!== id ||!c.headerName||!c.accessToken||!(Date.parse(c.expiresAt)>Date.now())||newURL(c.cdpUrl).protocol!=='wss:'){thrownewError('Invalid or expired CDP credentials');}return{endpoint: c.cdpUrl,headers:{[c.headerName]: c.headerName.toLowerCase()==='authorization'?`Bearer ${c.accessToken}`: c.accessToken},};}exportasyncfunctionendpoint(){// An isolated local CDP endpoint can test the client without managed credentials.if(process.env.LOCAL_CDP_URL){const url =newURL(process.env.LOCAL_CDP_URL);if(!['127.0.0.1','localhost','[::1]'].includes(url.hostname)){thrownewError('LOCAL_CDP_URL must use loopback');}return{endpoint: url.href,headers:{}};}returnconnection(process.env.NSTDATA_SESSION_ID);}
Сохраните traffic.mjs и запустите TARGET_URL=http://127.0.0.1:4173/catalog node traffic.mjs. Базовый уровень проходит без маршрута. Лечение применяет одно точное соответствие URL перед навигацией. Обработчик маршрута проверяет тип ресурса перед прерыванием. Установщик URL обрабатывает объект URL из API маршрута и строку из наблюдений запросов.
Ожидаемый вывод фикстуры включает baseline.delivered: 1, blocked: 1, delivered: 0 и accepted: true. Завершенный запрос является событием браузера, а не записью о расходах провайдера. Этот пример проверяет доставку и контент с помощью небольшой фикстуры. Постройте более сильный тестовый предикат для страниц со скелетом, который может появиться перед последними строками.
Шаг 4. Удалить маршрут и завершить браузер
Скрипт отменяет регистрацию маршрута тем же сопоставителем и обработчиком, удаляет свои собственные слушатели событий и закрывает страницу. Если работа контролирует управляемый браузер, остановите его и дождитесь завершения. Сохраните оригинальное состояние, правила маршрута, которые использовались, и бизнес-результат в записи работы. См. Управление сессиями облачного браузера.
[Скриншот: Базовый и маршрутизируемый диагностический запуск для контролируемой фикстуры каталога, оба показывают ожидаемый маркер готовности.]
Почему количества запросов и измеренное использование прокси могут расходиться?
Счетчики запросов описывают события браузера, в то время как записи о расходах провайдера отражают трафик, измеряемый службой. Запрос, наблюдаемый Playwright, мог быть прерван, кэширован, перенаправлен или доставлен. Это делает подсчеты полезными для локальной диагностики и неполными как для расчета затрат. Сверьте выполнение с использованием провайдера по тому же аккаунту и временным интервалам.
Установка маршрута может отключить HTTP-кэш. Базовый с кэшированием браузера и маршрутизируемый запуск с отключенным кэшированием могут дать асимметричное сравнение. Для более надежного бенчмарка сравните отдельные свежие сессии с одинаковыми условиями кэширования, конфигурацией и фиктурами. Если вам нужно сопоставленное перерасходование маршрута, сравните маршрут, разрешающий трафик, с блокирующим маршрутом. Справка Playwright Page.route.
Служебные работники могут перехватывать трафик до того, как ваш обработчик страницы его увидит. Для контролируемого теста, содержащегося в новом контексте, учитывайте, как меняется политика службы работника. Блокирование службы работника изменяет поведение приложения и требует одобрения от владельца теста и проверки на приемлемость. Первый запрос в всплывающем окне также может потребовать маршрутизации на уровне контекста. Ограничьте это маршрутизирование контекстом, который вы контролируете. Справка Playwright BrowserContext.route.
Что может пойти не так после добавления узкого маршрута?
Маршрут может не сработать, потому что сопоставитель URL слишком широк, актив в настоящее время необходим, маршрут был присоединен слишком поздно или браузер обслуживал ресурс в другом месте. Наблюдайте за точным неудачным условием и добавьте один диагностический тест для каждой гипотезы.
Если ни одно правило не срабатывает, проверьте фактический источник, путь и использует ли приложение служебного работника. Просмотрите сетевой трафик, чтобы узнать, как обрабатывался запрос.
Если маршрут сработал, и страница зависла, проверьте требуемые ответы и первую точку проверки, видимую пользователем. Отмените правило во время расследования.
Если использование растет, сравните поведение кэша, количество перенаправлений и повторы задания. Подтвердите завершение сессии перед сравнением использования ресурса.
Если тест влияет на несвязанные вкладки, ограничьте маршрут страницей или выделенным контекстом и удалите его после выполнения задачи.
Используйте принятый вывод в качестве защитного барьера. Тест, который экономит передачу, но теряет результаты, создает дополнительную работу и может увеличить общие расходы. Просмотрите живую диагностику консоли и сети, чтобы подтвердить первый неудачный запрос или утверждение.
Как узнать, безопасно ли оставлять правило?
Сохраняйте маршрут только после того, как базовый и репрезентативный маршрутизируемый запуск соответствуют контракту приемки приложения. В фиктуре отсутствие заголовка Каталог готов приводит к сбою работника, независимо от количества. В приложении с пагинацией проверьте ожидаемое название страницы и идентификаторы записей в первом и последнем случаях. Если страница имеет адаптивное поведение, протестируйте оба размера, где вы знаете, что она обслуживает разные активы.
Запишите шаблон исходного URL, тип актива, время, количество выходных данных и наблюдение за использованием службы. Назначьте каждому правилу четкого владельца и условие отката. Если развертывание повторно использует тот же URL актива для функционального компонента, тест для этого компонента должен обнаружить отсутствующую зависимость до того, как изменение достигнет пользователей.
Как Nstdata Cloud Browser поддерживает этот эксперимент?
Nstdata Cloud Browser предоставляет управляемые облачные браузеры для автоматизации браузеров и ИИ-агентов. Playwright может подключаться через CDP и применять ограниченный маршрут на выбранной управляемой странице. Встроенный прокси передает разрешенный целевой трафик в соответствии с выбранными настройками. История сеансов предоставляет отдельные наблюдения за использованием, когда это возможно. Ваше приложение владеет правилом маршрутизации и его условиями принятия и отката. Документация по автоматизации браузеров.
Управляемый маршрут. Сравните под一致ально поддерживаемым выбором прокси, не добавляя вторичные шлюзы к вашему рабочему процессу.
CDP выполнение. Примените одно и то же правило, специфичное для страницы, после подключения и поддерживайте его срок службы, связанный с тестом.
Живая отладка. Проверьте поддерживаемую диагностику выбранной страницы и просмотрите измеренное службой использование после вашего запуска.
Четкая граница затрат. Уточняйте время работы браузера и трафик отдельно. Цены на облачный браузер.
Развертывание следует производить только после того, как репрезентативная выборка сохраняет ту же скорость принятия, демонстрирует воспроизводимые сбережения по использованию и проходит целевые тесты для страниц, которые загружаются по-разному. Сохраняйте точный объем маршрута и владельца для отката. Проверьте эффект сбоя и подтвердите очистку до увеличения конкурентности. Для отладки в производственной среде сохраняйте очищенные сетевые наблюдения и небольшую выборку принятого вывода.
Q: Могу ли я заблокировать все изображения, чтобы сэкономить трафик?
Начните с одного проверенного необязательного изображения. Диаграммы продуктов, значки интерфейса, графики или артефакты визуальной регрессии могут зависеть от изображений.
Q: Должен ли я считать каждую наблюдаемую заявку как оплаченный трафик?
Используйте события браузера для проверки эксперимента и использования провайдера для учета трафика.
Q: Почему Playwright пропускает запрос?
Проверьте время регистрации маршрута, правильную страницу или контекст, а также поведение сервисного работника.
Q: Влияет ли применение маршрута на поведение кеша?
Playwright документирует влияние кеша от маршрутизации. Сравните эквивалентные настройки кеша при измерении сбережений.
Q: Мне все еще нужно завершить управляемый браузер?
Да. Очистка страниц и отключение клиента не завершают жизненный цикл управляемой сессии.
Создайте тестовые случаи, которые изолируют маршрутизацию и настройки браузера. Используйте сигналы браузера и видимые результаты приложения, чтобы объяснить различия в локали в сеансе облачного браузера.
Marcus Chen
Nov. 19th 2026
Запускайте облачные браузеры по запросу
Работайте с отпечатками браузера и CAPTCHA
Автоматизируйте процессы и расширяйте возможности ИИ-агентов
От сбора веб-данных и тестирования до автоматизации с ИИ — запускайте всё в облаке.