Войти
Проверка связки

Как проверить клоаку: глазами Googlebot, Meta, Яндекса и своими

Проверять связку надо теми же инструментами, что и площадки: официальные загрузчики Google, Meta и Яндекса показывают, что именно получил их робот. Собрали все способы, от отладчика репостов Meta до headless-браузера, и объяснили, что искать в статистике фильтра.

Обновлено 22 сентября 20265 мин чтения874 словBoostRouter KLO

Клоака работает, если проверка видит white, а покупатель оффер. Убедиться в этом до запуска можно и нужно, причём теми же инструментами, которыми пользуются площадки. Ниже полный набор: официальные загрузчики Google, Meta и Яндекса, ручные проверки с разных сетей и устройств, сервисы, которые «пробивают клоаку», и то, как читать статистику фильтра после запуска.

1. Официальные загрузчики: что видит робот на самом деле

Google: Проверка URL в Search Console и Rich Results Test

В Search Console у инструмента «Проверка URL» есть кнопка «Проверить опубликованную версию». Она загружает страницу роботом Google и показывает полученный HTML и скриншот. Если фильтр настроен верно, вы увидите белую страницу. Нужен подтверждённый домен в Search Console.

Справка Search Console: кнопка «Проверить опубликованную версию» показывает страницу, полученную роботом Google
Search Console: страница глазами робота Google.

Если домен не подтверждён, тот же результат даёт публичный Rich Results Test: он загружает страницу с инфраструктуры Google и показывает отрендеренный HTML. Это самый быстрый способ проверить white глазами Google без доступа к аккаунту.

Meta: отладчик репостов

Отладчик репостов Meta загружает страницу краулером facebookexternalhit и показывает, какие заголовок, описание и картинку он получил. Заголовок белой страницы в ответе означает, что краулер Meta видит white. Инструмент требует входа в Facebook.

Яндекс: Проверка ответа сервера

В Вебмастере есть инструмент проверки ответа сервера: он загружает страницу роботом Яндекса и показывает ответ. Нужен домен, подтверждённый в Вебмастере. Отдельный инструмент проверки мобильных страниц покажет мобильную версию white.

Microsoft: Bing Webmaster Tools

Инструмент проверки URL в Bing Webmaster Tools показывает страницу глазами bingbot. Полезно для кампаний в Microsoft Advertising.

2. Ручные проверки: сети, устройства, браузеры

  1. Телефон через мобильный интернет по ссылке из объявления: должен открыться оффер. Это единственный сценарий, где ожидается оффер.
  2. Тот же телефон через домашний Wi-Fi: оффер, если гео и устройство совпадают с кампанией.
  3. Рабочий компьютер из офиса: white, если кампания мобильная или IP офиса не в белом списке.
  4. VPN и прокси из другой страны: white.
  5. Прямой заход без метки клика с любого устройства: white.
  6. Повторный заход с того же устройства: результат не должен меняться из-за кэша.

Перед ручными проверками добавьте свои IP в белый список фильтра или, наоборот, уберите их оттуда, в зависимости от того, что проверяете. Иначе фильтр «научится» считать ваш офис ботом или пропускать его всегда.

3. curl с чужим User-Agent

С любого сервера можно запросить страницу, представившись роботом. Например, строкой AdsBot-Google:

curl -s -A "AdsBot-Google (+http://www.google.com/adsbot.html)" https://ваш-домен/?gclid=test | grep -i "<title>"

Ожидаемый ответ: заголовок белой страницы. Так же проверяются facebookexternalhit, YandexDirect, bingbot и пустой User-Agent. Учтите, что IP вашего сервера не принадлежит Google, поэтому хороший фильтр отдаст white уже по IP хостинга, независимо от строки. Это тоже правильный результат.

4. Headless-браузер из облака

Проверка без подписи чаще всего выглядит как обычный Chrome, запущенный в облаке. Воспроизвести её просто: запустите headless Chrome на любом облачном сервере и откройте адрес с меткой клика. Правильный результат: white. Если увидели оффер, значит фильтр пропускает трафик из дата-центров или не проверяет исполнение JavaScript и признаки headless.

5. Сервисы «пробить клоаку»

Есть инструменты, которые открывают адрес несколькими типами посетителей и показывают, что отдаёт домен каждому. Наш инструмент на down-web.com делает именно это: показывает ответ для обычного браузера, для известных роботов и для заходов без метки. Применяйте к своему домену: если сервис видит оффер там, где должен быть white, его увидит и проверка. Те же инструменты используют конкуренты, чтобы посмотреть чужие связки, так что считайте их частью проверки.

6. Проверка PWA

Запрос «как пробить клоаку PWA» встречается часто, потому что прогрессивные веб-приложения используют как обёртку для офферов: объявление ведёт на страницу, которая предлагает «установить приложение», а содержимое подгружается уже внутри. Проверить такую связку можно так: откройте адрес в десктопном Chrome и посмотрите манифест приложения и сервис-воркер в инструментах разработчика, затем откройте тот же адрес с телефона через мобильный интернет и с телефона через VPN. Если оболочка и содержимое отличаются в зависимости от сети и устройства, фильтр работает. Если содержимое оффера лежит в открытом манифесте или подгружается всем подряд, связка видна.

7. Статистика фильтра после запуска

Проверка не заканчивается запуском. В кабинете KLO по каждому заходу видно решение и причину: сеть, сигнатура, отсутствие метки, гео, устройство. Что смотреть в первые дни.

Кабинет KLO, вкладка Обзор: доля offer и white за 45 дней, трафик по дням и причины решений
Обзор в кабинете: доля offer и white, трафик по дням, причины решений появляются после первых кликов.
  • Доля white. Резкий рост означает проверку или спай-сервис, резкое падение до нуля чаще всего слетевший ключ или изменившийся формат метки.
  • Заходы с сетей рекламной системы. Их ритм показывает, когда именно прошла проверка.
  • Заходы без метки. Если их много и они идут на оффер, правило про метку выключено.
  • Повторы с одной подсети. Кто-то обходит домен целиком.

Частые вопросы

Как посмотреть свой сайт глазами Googlebot

Через «Проверку URL» в Search Console кнопкой «Проверить опубликованную версию» или через публичный Rich Results Test. Оба загружают страницу роботом Google и показывают отрендеренный HTML.

Как пробить клоаку в Facebook

Отладчик репостов Meta загружает страницу краулером facebookexternalhit и показывает полученные заголовок и описание. Если там white, краулер видит white. Свою связку проверяйте так же.

Как проверить клоаку онлайн без сервера

Официальными загрузчиками Google, Meta и Яндекса, сервисом «пробить клоаку» на down-web.com и заходами через VPN с разных устройств.

Что делать, если headless-браузер видит оффер

Включить правила по сетям дата-центров и признакам headless, добавить JS-слой, проверяющий исполнение скриптов, и убедиться, что решение принимается на сервере до отдачи страницы.

Как проверить клоаку PWA

Сравнить манифест и содержимое при заходах с десктопа, с телефона через мобильный интернет и с телефона через VPN. Содержимое оффера не должно быть доступно без прохождения фильтра.

Проверьте связку на своём трафике

KLO отсеивает ботов, модераторов и фрод до показа оффера. Пробный период 3 дня с полным функционалом тарифа START, карта не нужна.

Начать бесплатно

Читайте также

ВСЕ

Все гайды по клоакингу

Пятнадцать материалов по источникам трафика, интеграциям и базовым вещам: белая страница, проверка связки, цены.