Что такое накрутка поведенческих факторов конкурентами

Поисковая система следит не только за текстом страницы. Поведенческие факторы (ПФ) — это сигналы о том, как люди ведут себя в выдаче и на сайте: возвращаются ли к результатам поиска, как быстро уходят, сколько времени проводят и сколько страниц смотрят, кликают ли по сниппету. Подробнее о том, как они устроены, мы рассказывали в материале про поведенческие факторы сайта.

Накрутка ПФ — это имитация действий пользователей: боты или нанятые люди заходят на сайт из поиска, листают страницы и уходят, чтобы исказить статистику.

Накрутку в плюс заказывает владелец сайта, чтобы поднять позиции. Накрутка в минус направлена против чужого ресурса, в разговоре её называют «скруткой» поведенческих факторов. Цель у недобросовестных конкурентов одна: ухудшить метрики вашего сайта, чтобы он потерял позиции или попал под ограничение.

Знакомая картина — в «Метрике» всплеск визитов, а заявок нет, или позиции вдруг просели. Тогда сначала нужно понять, атака ли это. Защита строится на ваших данных «Яндекс Метрики»: мониторинг, технические меры и доказательства для поддержки.

Индивидуальная стратегия продвижения

Под ваш бюджет, тип и возраст сайта.

Узнать больше

Какие бывают накрутки и как работают боты

Яндекс называет три класса нарушения: программы и сервисы, автоматически имитирующие заходы из поисковых систем; обычные пользователи, которых привлекают специальными заданиями; услуги по искусственному увеличению посещений из выдачи.

В атаке на чужой сайт всё это выглядит иначе: боты не обязаны выглядеть как боты. По наблюдениям практики, встречаются серии коротких визитов с мгновенным уходом, прямые заходы и переходы из соцсетей. Источники могут смешивать, чтобы трафик не выделялся на фоне обычных визитов и не бросался в глаза в отчётах. Есть и «нагул»: боты сначала ведут себя как обычные пользователи, а потом портят метрики.

Практики делят накрутку на нативную и автоматизированную. Нативная имитирует действия живых людей, автоматизированная работает через скрипты и RPA, то есть программных роботов. Это терминология практиков, а не классификация Яндекса.

Стоит запомнить

Практики отмечают, что негативную накрутку остановить труднее, чем запустить. Чтобы перекрыть накрученные отказы, нужно заметно больше нормальных визитов, поэтому реагировать лучше на ранние признаки, пока позиции ещё в норме.

Схема цепочки негативной накрутки: боты, короткие визиты, искажение метрик, реакция алгоритма, риск ограничения
Как негативная накрутка влияет на метрики и позиции сайта

Могут ли конкуренты загнать сайт под фильтр

Яндекс публично не говорит, что чужая накрутка не приведёт к ограничениям, и не описывает, как отличает её от своей. Исходить стоит из худшего варианта: данные вашего счётчика станут единственным аргументом.

Что Яндекс заявляет об имитации действий

Яндекс относит любые формы накруток к поисковому спаму и предупреждает, что их использование несёт риск существенных ограничений в ранжировании. Речь в этом правиле о владельцах, которые сами накручивают сайт, а атаки третьих лиц в нём не описаны.

Если алгоритмы фиксируют нарушение, они применяют ограничения. Те могут затрагивать весь сайт или его разделы и перестают действовать, когда нарушение устранено и алгоритмы убедились, что оно не повторяется.

Есть ли ограничение, видно в «Яндекс Вебмастере» на странице «Оптимизация сайта → Безопасность и нарушения»: туда попадает и имитация действий пользователей. Если список нарушений пуст, ограничений на сайте нет и причину просадки нужно искать в другом. Если нарушение есть, сверьте даты всплеска роботности в «Метрике» с днём, когда упали позиции, — так проще понять, связано ли оно с атакой. Как это сделать, описано в разделе про «Метрику».

Чего у Яндекса нет в открытом доступе

В открытом доступе нет описания, как алгоритм отличает чужую накрутку от своей, и нет гарантии защиты. На фразу «Яндекс разберётся сам» полагаться нельзя.

На практике ответ поддержки бывает шаблонным: действия злоумышленников не должны отразиться на позициях. Это наблюдение практиков, а не политика Яндекса. На ранжирование влияют многие факторы ранжирования, поэтому без собственных данных не понять, что происходит именно с вашим сайтом.

Для бизнеса просадка означает потерю позиций и органического трафика, лишние траты на рекламу и на восстановление. Заявок становится меньше, а компенсировать их приходится платным трафиком — чем дольше вы не замечаете проблему, тем дороже она обходится.

Продвинули интернет-магазин одежды 21SHOP

Вырастили трафик c 200 переходов до 90 тыс. в месяц.

Читать кейс

Как выявить накрутку в «Яндекс Метрике»

Что «Метрика» показывает о роботах

Метрика сама отмечает роботов: определяет их по поведенческим факторам и другим техническим сигналам. Роботы, которые представились и чей User-agent известен, сразу исключаются из статистики, их можно посмотреть в отчёте «Роботы».

По умолчанию статистика показывается с учётом визитов роботов, определённых по поведению. Чтобы увидеть картину без них, настройте сегмент без роботов, а в отчёте включите «Сравнить с данными с роботами». Если в счётчике включён фильтр роботов по поведению, дополнительная настройка недоступна, но их активность остаётся видна в отчёте «Роботы».

Читайте отчёт по шагам. Сначала сравните сегмент без роботов с общей статистикой, затем посмотрите, какие источники и страницы дают разницу. Высокая роботность сама по себе ещё не диагноз.

Роботы в «Метрике» — это оценка самого счётчика, а не решение поиска о санкциях. Отчёт показывает картину ваших данных, а есть ли ограничение, видно в Вебмастере.

Есть и обратная сторона: роботы могут снижать глубину просмотров и увеличивать количество отказов. Поэтому любой сдвиг этих показателей сначала проверьте сегментом без роботов. Если в нём картина нормальная, сдвиг связан с роботами, а не с контентом или юзабилити.

По каким признакам можно заметить атаку

Признаки атаки собираются из нескольких отчётов:

  • Нетипичные источники. Резкий рост трафика из каналов, которых раньше не было.
  • Прямые заходы и соцсети. Всплеск переходов без привычного пути пользователя.
  • Показатель отказов. Отказом считается визит, в котором открыта одна страница, время короче заданного порога (по умолчанию 15 секунд) и нет события «неотказ».
  • Время на сайте и глубина просмотра. Оба показателя падают на фоне роста визитов.
  • Концентрация. Визиты собираются в одном регионе или в одно и то же время суток.

Один признак ничего не доказывает, а причин у картины может быть несколько. Тревожит именно совпадение нескольких сигналов.

Чтобы видеть отклонения, заранее сохраняйте нормальные значения источников, прямых заходов, роботности, отказов, глубины и географии за несколько недель до подозрения. Без базовой линии любое колебание выглядит как атака.

Смотрите не на общий показатель отказов по сайту, а на срез по источнику и посадочной странице. Общая цифра размывает всплеск, а в срезе видно, откуда он пришёл и на какие страницы попал.

Евгения Глушакова Аналитик

Что покажет «Вебвизор»

Отчёты «Метрики» показывают цифры, а «Вебвизор» — сам визит: запись движений курсора, прокруток и кликов. Накрутка редко проходит этот фильтр без следов, по записям боты заметно отличаются от людей:

  • Курсор замирает в точке XY. Весь визит он стоит в одном месте, например в углу экрана, и не движется к ссылкам, меню или кнопке закрытия вкладки.
  • Пауза выжидания. После перехода из поиска бот, по наблюдениям практиков, ничего не делает 12–16 секунд, чтобы визит не попал в отказы с порогом в 15 секунд. И только затем начинает прокручивать страницу и двигать курсор.
  • Неестественные клики. Нажатия в пустые зоны страницы, в одни и те же элементы из визита в визит, прокрутка по одному шаблону.
  • Копии друг друга. У разных «посетителей» совпадают разрешение экрана, время на странице и последовательность действий.

Просмотрите десяток записей из подозрительного источника и сравните их с записями обычных посетителей. Совпадение нескольких признаков в большинстве записей усиливает подозрение, но одна запись ничего не доказывает. Лучшие примеры сохраните: они войдут в пакет доказательств для поддержки.

Накрутка или другая причина просадки

Сверьте даты: всплеск роботности и прямых заходов против дня, когда упали позиции. Совпадение усиливает подозрение, но причину не доказывает.

Затем исключите альтернативы: обновление алгоритма, техническую ошибку на сайте, переспам в текстах, сезонность. Проверяйте по датам и по сегменту без роботов: если в нём падение сохраняется, дело, скорее всего, не в ботах. Для динамики позиций пригодится регулярная проверка позиций сайта.

Схема диагностики накрутки в Метрике: базовая линия, отчёт Роботы, сверка дат, исключение других причин, решение
Порядок диагностики: от базовой линии до решения
Сравнение поведения бота и человека в Вебвизоре: курсор, пауза в начале визита, прокрутка, клики, повторяемость
Поведение в «Вебвизоре»: бот и человек

SEO-аудит для вашего сайта

Проверим сайт по 100+ параметрам. Проанализируем все, что влияет на продвижение в поиске.

Обсудить проект

Как защитить сайт от накрутки техническими мерами

Бороться с накруткой можно разными мерами, но ни одна из них не гарантирует результат и у каждой есть цена. Выбор зависит от стадии: идёт ли накрутка при нормальных позициях или сайт уже просел.

Антибот-проверка

Основное средство против ботов — антибот-проверка до выдачи страницы. Скрипты и сервисы отсеивают подозрительные визиты ещё до загрузки сайта: пропускают поисковых роботов и живых людей, а остальных не пускают. Она лучше работает, когда накрутка замечена, а позиции ещё в норме.

Выбор не ограничивается Cloudflare. Среди российских решений — Botfaqtor, который сочетает антибот и умную капчу, и AntiBot.cloud, который подключается скриптом на сайт или работает как облачный сервис. Российские сервисы удобны интерфейсом на русском и привязкой к российским сценариям накрутки. Ограничения у скриптов общие: несовместимость с кэшированием на уровне NGINX или .htaccess, если проверка кэша идёт раньше антибота, и часть рекламных проверок.

Антибот дополняет мониторинг, но не заменяет его. После включения сравните сегмент без роботов с общей статистикой и посмотрите, не просели ли визиты реальных пользователей из поисковых систем. Если просели, проверку нужно смягчить.

Блокировки по IP и проверка робота Яндекса

Блокировка по IP и User Agent слабо помогает против мобильных прокси, ротации адресов и смены User Agent. К тому же она может задеть живых людей на динамических IP.

После настройки проверьте, что сайт остаётся доступен для робота Яндекса, посмотрите на динамику трафика реальных пользователей и рекламы. Если упали люди, а не боты, мера слишком жёсткая.

Чтобы не заблокировать настоящего робота, проверьте IP из логов обратным DNS-запросом: имя хоста должно заканчиваться на yandex.ru, yandex.net или yandex.com. Затем прямым DNS-запросом убедитесь, что имя указывает на тот же IP. Яндекс считает такую фильтрацию более предпочтительной, чем списки IP-адресов.

Прежде чем включать блокировки, сохраните выгрузку логов за период всплеска. После настройки фильтров следов атаки в логах станет меньше, а для обращения в поддержку они понадобятся.

Абросимов Виктор Веб-мастер

Капча и переклейка домена

Капча помогает против простых ботов, но жёсткая проверка бьёт по органическому трафику. Мягкий вариант — «умная» капча: обычному посетителю хватает одного клика, а задание получает только подозрительный. Такую проверку даёт Яндекс SmartCaptcha, у Botfaqtor она встроена в антибот. Подключайте её на формы и страницы, которые атакуют, а не на весь сайт.

Переклейка на новый домен 301-м редиректом — крайняя мера: отзывы практиков противоречивы, результат обещать нельзя.

Сравним меры по пользе и риску:

МераЧто даётЧем рискует
Антибот-проверкаОтсекает ботов до загрузки страницыКонфликт с кэшем и проверками рекламы
Блокировка по IPЗакрывает известные адресаОбходится прокси, задевает людей
КапчаОстанавливает простых ботовТеряется органический трафик
Переклейка доменаНовый домен без истории атакиРезультат нельзя гарантировать

Реклама и профилактика

Боты нагула могут скликивать и контекстную рекламу, поэтому качество рекламного трафика стоит контролировать отдельно.

Для справки

В «Яндекс Директе» недействительный трафик отфильтровывается автоматически, а расходы за него в большинстве случаев возвращаются на баланс. При подозрении на фрод напишите в поддержку и укажите номер объявления, период, номер счётчика «Метрики» и ссылки на отчёты.

Для профилактики регулярно сверяйте «Метрику», держите под рукой сегмент без роботов и настройте уведомления о всплесках.

Три эшелона технической защиты сайта: антибот-фильтр, умная капча, контроль в Метрике и логах
Три эшелона технической защиты сайта

План действий по ситуации сайта

Определите свою стадию. Порядок шагов рекомендует агентство, это не норма платформы.

СтадияПервый шагЧего не ждать
Накрутка идёт, позиции в нормеЗафиксировать признаки и датыЧто Яндекс отреагирует сам
Позиции упалиПроверить нарушения в «Вебмастере», сверить датыБыстрого ручного возврата
Видимость пропалаПроверить свою сторону и устранить причиныСнятия раньше проверки

На первой стадии антибот включайте с оглядкой на живых людей и робота Яндекса. На второй соберите пакет доказательств и обратитесь в поддержку. Третья требует отдельной проверки: найдите модули и подрядчиков, которые могли накручивать ПФ, устраните причины и задокументируйте каждый шаг. Если нарушение отмечено в «Вебмастере», опишите изменения в его блоке, приложите подтверждающие файлы, отметьте «Нарушение исправлено» и отправьте сайт на проверку. Срок, после которого ограничение снимают, Яндекс не называет, но проверка после отправки идёт до 30 дней, а если ограничение осталось, повторно отправить сайт можно только через 30 дней после прошлой отправки.

Если ограничение за накрутку всё же наложено, ориентир по практике — от 8 до 12 месяцев до полного возврата позиций. Это не официальный срок: в реальности он зависит от тяжести нарушения, от того, насколько быстро найдены и устранены причины, и от повторной проверки. Чем раньше собраны данные и точно определён источник проблемы, тем меньше времени теряется впустую. Именно поэтому диагностика и подготовка к снятию ограничений — отдельная работа: агентство BDBD помогает разобраться в причинах и пройти путь до проверки, но гарантировать снятие фильтра не может, решение остаётся за поисковой системой.

Как доказать накрутку и написать в поддержку Яндекса

Написать можно в чат поддержки «Яндекс Вебмастера»: он работает ежедневно с 8:00 до 00:00 по Москве. Отдельной процедуры для жалоб на накрутку конкурентами Яндекс не описывает и пересмотра не обещает.

Какие доказательства собрать

Доказательства должны показывать даты и динамику. Соберите пакет:

  • Скриншоты «Метрики» с датами. Источники, прямые заходы, отказы, глубина за период всплеска.
  • Отчёт «Роботы» и сравнение. Данные с роботами и без них рядом.
  • Выгрузка визитов. Источник, регион, время и страницы входа.
  • Фрагменты логов. Запросы подозрительных адресов за те же даты.
  • Позиции до и после. Динамика с датами просадки.
  • Принятые меры. Что вы уже включили и когда.

Такой пакет показывает хронологию, поддержке не нужно гадать, на что смотреть.

Как составить письмо

В письме по порядку укажите адрес сайта и номер счётчика, что произошло и когда, чем это подтверждено, что вы уже сделали и о чём просите. Пишите коротко и без обвинений в адрес конкурентов, если у вас нет доказательств.

Пример формулировки: «Здравствуйте. Сайт [адрес], счётчик «Метрики» [номер]. С [дата] мы наблюдаем рост роботных визитов и падение позиций. Данные по отчётам и выгрузку визитов можем предоставить, принятые меры перечислили. Просим проверить обращение и сообщить, какие сведения нужны дополнительно». Не требуйте вернуть позиции: просьба проверить данные выглядит корректнее.

Нюанс

Если ответ пришёл шаблонный, не спорьте с формулировкой. Дополните обращение новыми датами и данными по мере накопления: так в переписке остаётся хронология, а не одна жалоба.

Конкуренты могут действовать и иначе: например, заявками-пустышками, чтобы загрузить отдел продаж. Фиксируйте такие случаи так же коротко и с датами.

Схема пакета доказательств для обращения в поддержку Яндекса: шесть материалов собираются в одно письмо
Пакет доказательств для обращения в поддержку

Чего не стоит делать при накрутке ПФ

Часть привычных реакций только усугубляет ситуацию:

  • Отвечать накруткой. Она не компенсирует ущерб и сама подпадает под определение нарушения.
  • Включать жёсткую капчу и геоблокировки на весь сайт. Они отсекают реальных пользователей и органику.
  • Блокировать вслепую по спискам IP и User Agent. Под блокировку попадают робот Яндекса и люди на динамических адресах.
  • Разбирать визиты вручную без базовой линии. Без точки отсчёта получится только шум.

Когда нужен внешний аудит

Внешний взгляд нужен, если у вас нет базовой линии, неясно, накрутка это или иная причина просадки, либо есть подозрение на собственные нарушения на сайте.

Логично начать с технического аудита сайта и веб-аналитики: первый касается технических проблем, вторая — настроек счётчиков и источников трафика. Чтобы видеть данные самостоятельно, пригодится и «Яндекс Вебмастер». Решение остаётся за владельцем сайта.

Вопросы о защите сайта от накрутки

Что делать, если накрутку запустил подрядчик или модуль

Яндекс советует убедиться, что на сайте нет модулей, способствующих имитации действий, и что специалисты, развивающие сайт, не используют такие методы. Найденное устраните и задокументируйте: когда, что именно и кем было отключено. Эти сведения пригодятся при обращении в поддержку.

Если подрядчик отрицает накрутку, попросите у него отчёты по источникам трафика и сверьте их со своей «Метрикой»: расхождения покажут, откуда приходят визиты.

Как отличить атаку на рекламу от атаки на органику

Сравните источники визитов: рекламные переходы видны по меткам кампаний, а органику смотрите в сегменте поисковых систем. Рекламный трафик контролируйте отдельно, по отчётам рекламной системы.

Могут ли конкуренты атаковать формы заявок

Да, спам в формах возможен: заявки-пустышки отнимают время менеджеров. Связь с накруткой ПФ не доказана, поэтому ведите учёт таких обращений отдельно от данных «Метрики».

Итоги

Главное из статьи:

  • Негативная накрутка. Имитация действий пользователей против чужого сайта, которую называют «скруткой».
  • Гарантии Яндекса. Защиты от чужой накрутки Яндекс публично не обещает, срок снятия ограничений не называет (практический ориентир — 8–12 месяцев, без гарантий), а проверка после исправления нарушения идёт до 30 дней.
  • Признаки. Роботы, прямые заходы, отказы, время и глубина оцениваются относительно вашей базовой линии.
  • Меры и их пределы. Антибот, блокировки, капча и переклейка работают с ограничениями и рисками.
  • Обращение. Письмо с пакетом доказательств фиксирует вопрос, но не гарантирует пересмотра.

Защита держится на мониторинге, доказательствах и аккуратных мерах. Сохраните сегодня нормальные значения «Метрики» — они понадобятся при первом подозрении.

Плати только за фактически достигнутый результат.

Наша цель: лиды, позиции и трафик 

Комментарии

Комментариев пока нет. Будьте первым!

💬 Оставить комментарий