К содержанию
Практическое руководство

Метрика показывает роботов: что проверить до блокировки посетителей

Как сравнить отчёты с роботными визитами и без них, отделить фильтр данных от блокировки сайта и подготовить вопросы специалисту.

В отчёте стало больше роботных визитов, и первая мысль — закрыть им доступ. Но прежде чем менять защиту сайта, стоит выяснить, что именно изменилось: состав посещений, настройки счётчика или способ просмотра отчёта. Сам по себе рост роботных визитов ещё не объясняет его причину.

Безопасный первый шаг — зафиксировать текущие настройки, период и условия отчёта, ничего не меняя в сборе данных или защите сайта. Затем проверьте, доступно ли сравнение с роботными визитами и без них: включённый фильтр роботов по поведению ограничивает такую возможность. Найденное расхождение запишите как наблюдение, а не как диагноз атаки.

Что значит «робот» в отчёте

Автоматические программы заходят на сайты с разными целями, в том числе чтобы находить страницы для поиска и проверять доступность. Метрика использует технические и поведенческие признаки для их определения. Программы, которые явно представились роботами, исключаются из основной статистики; для них есть отчёт «Роботы». Для визитов, распознанных по поведению, предусмотрено сравнение данных с роботами и без них, если их не исключил фильтр счётчика. Справка также предупреждает: Метрика и Директ используют разные системы определения роботов. Поэтому расхождение между сервисами само по себе не объясняет причину. Как Метрика отображает роботов.

Не приравнивайте роботный визит к спам-заявке. В первом случае речь о классификации посещения, во втором — о качестве конкретного обращения. Связь между ними нужно проверять на данных сайта, а не предполагать по похожей динамике.

Сначала уточните, какое число вы сравниваете

Фраза «роботов стало больше» может означать рост количества визитов, рост их доли или просто отличие двух открытых отчётов. Это разные задачи.

До проверки ответьте на пять вопросов:

  1. Какой счётчик и какой сайт открыты? Не сравниваются ли рабочий сайт и тестовая версия?
  2. Какой показатель выбран: визиты, посетители, просмотры или доля? Подпишите его рядом с числом.
  3. Какие точные даты и часовой пояс используются? Завершённую неделю не стоит сопоставлять с частью текущей недели без пояснения.
  4. Ограничены ли источник перехода, страницы, устройства или другие условия? Для каждого ограничения должно быть понятно, зачем оно введено.
  5. Какой режим отображения роботов включён и какие настройки сбора данных действовали в эти даты?

Сделайте снимок экрана с периодом и условиями. Если подозрение возникло после изменения настроек, отдельно запишите дату изменения. Такой журнал поможет восстановить ход проверки, даже если её продолжит другой сотрудник.

Не смешивайте три разных действия

Убрать часть визитов из рассматриваемого отчёта, изменить сбор данных и запретить доступ к сайту — не одно и то же.

ДействиеЧто нужно решить до него
Сегмент или режим отображения отчётаКакие группы данных требуется сопоставить, сохраняя прочие условия одинаковыми.
Фильтр в настройках счётчикаКакие данные перестанут учитываться и зачем это необходимо для работы.
Ограничение доступа на стороне сайтаКакое подтверждённое поведение нужно остановить и как проверить, что обычные посетители не пострадали.

Фильтры счётчика не меняют данные, собранные до их включения. Но последующие изменения данных необратимы. Если включить фильтрацию роботов по поведению, соответствующие визиты не будут учитываться в исходной статистике с этого момента; вернуть их переключением отчёта не получится. Яндекс рекомендует эту опцию, когда для работы через Logs API — интерфейс выгрузки подробных данных — нужны данные без роботов. В остальных случаях предлагается менять режим отображения отчётов. Не включайте её просто ради более приятной статистики. Фильтры и операции Метрики.

Три разные операции: сравнение отчёта, фильтрация исходных данных и ограничение доступа к сайту. Блокировка не является обязательным итогом проверки
Изменение отчёта, фильтра счётчика и доступа к сайту решает разные задачи. Начните с сопоставимых данных

Как провести первую проверку

Откройте нужный отчёт и задайте один законченный период. Зафиксируйте показатель и все ограничения. Если сравнение доступно, сопоставьте данные с роботными визитами и без них, сохранив источник перехода, даты и страницы. Если оно недоступно, сначала уточните настройки и дату включения фильтра: не отключайте его в надежде восстановить прошлые данные. Способ сравнения и его ограничения описаны в справке Метрики.

Запишите, какие показатели отличаются и в какой части выборки. Если общий график изменился, уточните, одинаково ли ведут себя разные источники и страницы. На этом шаге вы ищете область проверки, а не выбираете виновника.

Затем вернитесь к настройкам адресов счётчика. По справке, к роботным могут относиться и посещения сайтов, не внесённых в его поля адреса и дополнительных адресов. Это повод проверить соответствие настроек реальным доменам проекта, а не автоматически добавлять любой найденный адрес. Определение роботов и адреса счётчика.

Условный пример. Маркетолог открыл отчёт по всем переходам с роботами, а подрядчик прислал экран только по поисковым переходам без роботов. Разные числа ещё ничего не говорят о качестве работы подрядчика. Сначала оба открывают одинаковый период, источник и режим. Только оставшееся расхождение становится предметом разбора. Пример иллюстрирует порядок сравнения, а не случай из практики агентства.

От наблюдения к проверяемой гипотезе

Не ограничивайтесь записью «много ботов». У каждого предположения должна быть следующая проверка и понятный результат, после которого можно двигаться дальше.

НаблюдениеВозможное объяснение, ещё не выводЧто проверить
Два отчёта показывают разные значенияУсловия сравнения не совпадаютСчётчик, даты, показатель, источник и режим отображения. После выравнивания повторить сравнение.
Изменение совпало по времени с настройкой счётчикаИзменилась учитываемая выборкаЖурнал изменений, сохранённые снимки настроек и дату правки. Не приписывать настройке причинность только по совпадению дат.
Необычная картина сосредоточена на одном адресе или источникеУ этой части посещений есть отдельная особенностьВыделить её в отчёте и передать специалисту точный диапазон дат и URL.
Одновременно жалуются на работу сайтаКроме аналитики есть технический симптомЗафиксировать ошибки и передать разработчику проверку доступности и серверных журналов. Не выводить причину из одной метки в Метрике.

Серверные журналы — записи запросов к сайту, которые при необходимости изучает технический специалист. Их сопоставление с аналитикой требует отдельной проверки: это не готовая взаимозаменяемая копия отчёта. Не публикуйте журналы целиком и не пересылайте лишние данные посетителей в общий чат.

Рабочий лист для команды

Для каждой гипотезы заполните одну строку. Если значения неизвестны, так и напишите: пустое поле легко принять за уже выполненную проверку.

Дата и периодСегмент и показательНастройкиНаблюдениеСледующая проверкаОтветственный
[Дата проверки; сравниваемые даты][Источник, страницы, режим роботов; визиты или другой показатель][Что действовало; что менялось и когда][Что видно без объяснения причин][Одно действие и ожидаемое свидетельство][Роль или сотрудник]

Если после сопоставления выяснилось, что уменьшился именно поисковый трафик, используйте отдельный план проверки падения трафика. Если вопрос в количестве обращений, сначала уточните, что считается заявкой и как настроены цели. Эти проверки связаны, но одна не заменяет другую.

Что спросить у подрядчика

Попросите не просто «убрать роботов», а объяснить:

  • На каких наблюдениях основан вывод и какие альтернативные причины уже проверены?
  • Предлагается изменить отчёт, сбор данных или доступ к сайту?
  • Какие сведения исчезнут из аналитики после изменения?
  • Как будет проверяться работа сайта для обычных посетителей?
  • Кто принимает решение и по каким признакам проверяется результат?

Хороший итог первого разбора — сопоставимые данные и список проверенных либо ещё открытых гипотез. Он не обязательно заканчивается блокировкой. Если подтверждений недостаточно, полезнее сохранить наблюдения и уточнить проверку, чем вводить массовые запреты по странам или IP-адресам.

Для обсуждения с агентством «Трофимов и партнёры» подготовьте адрес сайта, период изменения и заполненный рабочий лист без личных данных посетителей. Согласовать проверку данных — следующий шаг, если команде нужна помощь с выбором и порядком проверок.

Позвонить7 дней бесплатно