
Прямые заходы поведенческих ботов Ростелеком на одну и ту же страницу в магазине мебели. Более 80% трафика сайта - прямые заходы. А переходы на сайт из поиска все сокращаются. Как вы догадались, прямые заходы не дают никакой конверсии, так как это поведенческие боты, нагуливающие себе профиль для прокачки поведенческих факторов. Заходят ровно на 15 секунд, после чего сессия прерывается. Либо отказной визит со временем 0 секунд.
Кто-то активно занимается нагулом поведенческих факторов для своей ботофермы.
Поведенческие боты обосновались на сайте более года назад, с тех пор количество переходов из поиска неуклонно снижается, что отчетливо видно на графике. Магазин, несмотря на широкий ассортимент, заметно стагнирует. Бизнес несет дополнительные затраты, в том числе необходимость вкладывать деньги в рекламу Яндекс Директ, которая также не очень окупается, и имеет низкую конверсию.
Руководство долгое время считало что все это временно, поисковый трафик вернется, нужно просто подождать. И вот через год ожидания стало понятно: с поведенческими ботами нужно что-то делать. Причем, для экономии средств - только с самыми надоедливыми ботами из Краснодара.
Вот пример по одному из айпи адресов за последние 24 часа. Ходит плюс-минус 1 раз в полчаса. User Agent каждый раз разный. Т.е. каждый раз бот представляется различными именами, как будто это не он заходил полчаса назад. Различные версии Android, различные параметры устройств, браузеров и так далее. Все это подставляется в случайном порядке, в самих настройках ботофермы.
На примере одного из айпи адресов, закрепленных за фермой ботов.
Блокировка и фильтрация поведенческих ботов практически невозможны без использования специализированных сервисов, наподобие Cloudflare. Изначально ориентированный на защиту от ДДОС с помощью продвинутых инструментов блокировки входящих запросов, на сегодня Cloudflare - это лучший способ защитить свой сайт от поведенческих ботов.
После подключения Cloudflare (смены NS серверов с regru на cloudflare) настраиваются правила фильтрации. Часть из них связана с заходами поведенческих ботов Ростелеком на одну и ту же страницу, а часть - с другими угрозами для сайта. Например, различные подключения к сайту, которые никто не ждал.
Bytespider, bytedance, MegaIndex, DotBot, MozBot, keys-so-bot, Ahrefs Bot, поддельный Googlebot, Applebot и прочее. Блокировка протокола HTTP1, и еще ряд правил по начальной фильтрации поведенческих ботов.
Результат вы видите на графике: поведенческие боты из Краснодар Ростелеком - побеждены.
Подпишитесь на Telegram канал / MAX для того, чтобы всегда быть в курсе последних новостей и обновленных настроек для защиты от ботов, а также оперативно получать новые материалы, выходящие на antibot24.ru

Автор статей: Сергей (AntiBot24). Эксперт в области фильтрации поведенческого трафика, настройки антибот систем. Высший рейтинг на Kwork, более 680 отзывов, 100% заказов успешно сдано, 56% повторных заказов. Пишу подробные статьи, инструкции по фильтрации ботов в своем блоге antibot24.ru
Всегда нужно иметь в виду, что те советы, которые вы прочли в статьях - это лишь часть настроек, которые я делаю при профессиональной экспертной настройке фильтрации поведенческих ботов. Все остальное - это непубличные профессиональные секреты. Любая информация, становящаяся общедоступной - достаточно быстро устаревает и перестает быть эффективной.
Если вы столкнулись с повышенной роботностью в Яндекс метрике, увеличением числа прямых заходов, увеличением количества отказов - вы всегда можете заказать у меня настройку Killbot.