Боты на сайте и роботность в Яндекс.Метрике: как проверить трафик и что делать

Роботность в Яндекс.Метрике — это доля визитов, которые счетчик распознал как визиты роботов, а не людей. Короткий ответ на вопрос «что делать, если на сайт заходят боты»: сначала понять, какие это боты и откуда они приходят, потом решить, мешают ли они. Часть роботов безвредна — это поисковые и служебные системы. Опасны те, что искажают статистику и портят поведенческие факторы: короткие визиты без действий, заходы «из ниоткуда», всплески трафика без заявок.

Разберем, как смотреть роботность в Метрике, как проверить ботов на сайте, чем бот-трафик вредит SEO и как от него защититься.

Что такое роботность в Метрике

Роботность — это метрика Яндекс.Метрики, которая показывает, какой процент визитов пришелся на роботов. Ее можно добавить в любой отчет: например, в отчет по источникам трафика или по страницам входа. Так видно, где именно боты концентрируются.

Метрика определяет роботов двумя способами:

• по строгим правилам — робот сам представился в User-Agent или у посетителя отключен JavaScript и не передан источник перехода;
• по поведению — визит выглядит неестественно: слишком быстро, однотипно, без характерных для человека действий.

Вторая группа в отчетах не расшифровывается: Метрика показывает ее отдельной строкой без подробностей.

Важно: роботность не бывает нулевой. Поисковые роботы, сервисы мониторинга, проверки доступности и превью ссылок в мессенджерах — все это нормальный фон. Проблема начинается, когда роботность резко растет или боты начинают выглядеть как пользователи.

Где смотреть роботов в Яндекс.Метрике

Основной инструмент — отчет «Роботы»: Отчеты → Мониторинг → Роботы. Он показывает, сколько обращений от роботов получил счетчик, с разбивкой по правилам определения.

Второй способ — добавить метрику «Роботность» в обычные отчеты:

1. Откройте отчет «Источники, сводка» или «Страницы входа».
2. Нажмите «Метрики» и добавьте «Роботность».
3. Отсортируйте по ней и посмотрите, у каких источников и страниц доля роботов выше обычной.

Третий — фильтрация роботов в настройках счетчика. В ней можно выбрать, учитывать ли роботов в статистике и определять ли их только по строгим правилам или еще и по поведению. Если включить фильтрацию по поведению, отчеты станут чище — но важно помнить, что вы меняете данные, а не трафик: боты продолжают заходить на сайт, просто вы их не видите.

Признаки ботов на сайте

Кроме самой метрики роботности, бот-трафик выдают характерные паттерны. Если на сайт заходят боты, в Метрике обычно видно несколько признаков сразу:

Если боты переходят на сайт из поиска — то есть приходят как будто из выдачи Яндекса по запросам, — это отдельный тревожный сценарий. Так иногда выглядит некачественная накрутка ПФ, которую сайту могли сделать без его ведома.

Чем боты вредят сайту и SEO

Искажают статистику. При большом количестве ботов на сайте вы не видите реальные отказы, время и конверсию — а значит, принимаете решения по неверным данным.

Портят поведенческие факторы. Короткие визиты с возвратом в выдачу — это ровно тот сигнал, который говорит Яндексу, что страница не отвечает на запрос. Бот-трафик из поиска может ухудшать поведенческие факторы, а в худшем случае — выглядеть как попытка накрутки. О том, чем это грозит, — в нашей статьео фильтрах Яндекса за накрутку ПФ.

Нагружают сервер. Массовые заходы роботов замедляют сайт для живых пользователей.

Сжигают рекламный бюджет. Если боты кликают по рекламе, вы платите за визиты, которые никогда не станут заявками.

Как проверить ботов на сайте: пошагово

1. Посмотрите отчет «Роботы» за последние 3 месяца и сравните с предыдущим периодом. Рост — повод копать дальше.
2. Добавьте «Роботность» в отчет по источникам. Найдите источник, где доля роботов выше остальных, — обычно это прямые заходы или конкретный реферер.
3. Постройте сегмент по подозрительному источнику и посмотрите в нем время на сайте, отказы, географию и устройства.
4. Откройте Вебвизор по этому сегменту и отсмотрите 10–15 записей. Однотипные сессии с одинаковым сценарием — почти наверняка боты. Как работать с записями, мы разбирали в статьечто смотреть в Вебвизоре.
5. Сверьте с целями. Если сегмент не дает ни одной заявки при сотнях визитов — это не ваши клиенты. Настроить цели для такой проверки поможет статьяо целях в Яндекс.Метрике.
6. Проверьте логи сервера, если есть доступ: там видны IP-адреса и User-Agent, которые Метрика не показывает.

Что делать, если ботов на сайте много

Сначала разделите задачи: очистить статистику и защитить сайт — это разные вещи.

Чтобы очистить статистику: включите фильтрацию роботов по строгим правилам и по поведению в настройках счетчика, а для анализа используйте сегменты без подозрительных источников.

Чтобы защитить сайт:

• подключите защиту от ботов на уровне хостинга или CDN — большинство провайдеров предлагают ее как опцию;
• ограничьте частоту запросов с одного IP;
• заблокируйте известные вредные User-Agent в настройках сервера;
• для форм используйте капчу, которая не мешает людям, например SmartCaptcha от Яндекса.

Чтобы не навредить SEO: не блокируйте поисковых роботов Яндекса и Google и проверяйте правила блокировки в Вебмастере после внедрения.

Роботность и продвижение поведенческими факторами

Отдельный вопрос, который часто задают перед запуском ПФ: не превратится ли продвижение в рост роботности. Ответ зависит от того, кто совершает переходы.

Боты и программы для накрутки как раз и дают тот паттерн, который Метрика и Яндекс распознают: однотипные сессии, одинаковые устройства, неестественное время. Поэтому один из способов проверить качество любого сервиса продвижения — посмотреть на роботность и поведение в Вебвизоре по его трафику. Если после запуска растет доля роботов и визиты выглядят одинаково — это плохой трафик, и его лучше остановить.

Бустер не использует ботов:переходы из поиска Яндекса выполняются с реальных устройств с живыми паттернами поведения. Это легко проверить на тестовом объеме — по тем же отчетам Метрики, которые описаны выше. Подробнее о том, как устроенанакрутка ПФ в сервисе, — на отдельной странице.

FAQ

Что такое роботность в Метрике? Это доля визитов, которые Яндекс.Метрика определила как визиты роботов. Ее можно смотреть в отчете «Роботы» или добавить как метрику в любой отчет.

Какая роботность считается нормальной? Универсальной нормы нет: она зависит от тематики, источников трафика и настроек фильтрации. Ориентируйтесь на свою динамику — резкий рост относительно обычного уровня важнее абсолютной цифры.

Почему в Метрике много роботов? Чаще всего это поисковые и служебные роботы, парсеры конкурентов, сервисы мониторинга или бот-трафик из рекламы и сомнительных источников. Выяснить помогает разбивка роботности по источникам.

Как отфильтровать ботов в Яндекс.Метрике? В настройках счетчика включите фильтрацию роботов по строгим правилам и по поведению. Учтите: это очищает статистику, но не защищает сайт от самих заходов.

Как определить бота на сайте без Метрики? По логам сервера: подозрительные User-Agent, много запросов с одного IP или подсети за короткое время, обращения к несуществующим страницам.

Вредят ли боты позициям в Яндексе? Могут. Короткие визиты из выдачи с возвратом в поиск ухудшают поведенческие факторы, а массовый бот-трафик из поиска может выглядеть как попытка накрутки.

Заключение

Роботность в Яндекс.Метрике — полезный индикатор качества трафика. Нормальный фон из поисковых и служебных роботов есть у любого сайта, а тревожные признаки — это резкий рост роботности, всплеск прямых заходов, однотипные короткие визиты и трафик без заявок.

Порядок действий простой: отчет «Роботы» → роботность по источникам → сегмент → Вебвизор → цели → логи. Статистику очищайте фильтрацией в счетчике, а сам сайт защищайте на уровне сервера. И если вы продвигаете сайт поведенческими факторами, проверяйте качество переходов по тем же отчетам — хороший трафик от живых пользователей не должен повышать роботность.