
Средняя посещаемость сайта, на который была совершена атака поведенческими ботами - около 5 000 посетителей в сутки. Это примерно 200 в час. В основном - поисковые переходы.
И вот однажды ночью число переходов увеличилось до 10 000 в час (в 50 раз), сайт просто наводнили боты. Кто-то явно включил его в свой список прогрева ботов и накрутки ПФ.
Выросли прямые заходы и переходы с сайтов. Переходы с сайтов - это тоже прямые заходы поведенческих ботов, просто в referer перехода подставляется адрес какого-то из реально существующих сайтов.
На графике все это смотрится достаточно эпично. Особенно тоненькая линия где-то там в самом низу графика, цифры прошлой посещаемости. Почти ДДОС, только из ясельной группы. При настоящем ДДОС будет не 200 тысяч подключений, а 200 миллионов.
Как вы понимаете, такая нагрузка не могла пройти незамеченной, хостер решил уточнить, как там у клиента дела, все ли в порядке... Предложил рассмотреть чуть более серьезный тарифный план хостинга.
Как-никак, сервер, рассчитанный на 5-10 тысяч посетителей в день, и сервер, рассчитанный на 200-300 тысяч в день - это немного разное оборудование, что по характеристикам, что по цене.
Анализ Cloudflare (хорошо, что он уже был подключен) показал, что все лишние боты приходят по новому протоколу IPv6.
В Рунете существует целый ряд ферм поведенческих ботов, которые осуществляют первоначальный "нагул" ботов именно с адресов IPv6. Аренда этих адресок крайне дешевая, по сравнению с IPv4 (классическими адресами). Поэтому можно никак себя не ограничивать в количестве уникальных IP во время работы фермы ботов.
В этой бот-атаке, а также в других аналогичных, мелькают одни и те же названия провайдеров, например:
А также другие сети ботов для нагула поведенческих профилей, около 10-15 разных ASN.
Блокировать никого не нужно. Можно поступить хитрее. В Cloudflare можно отключить поддержку протокола IPv6. Реальные посетители при этом войдут по классическому адресу, а вот у ботов поведенческих факторов такого количества айпи быть не может даже теоретически. Не будут же все 250 тысяч поведенческих ботов ходить с пары десятков закрепленной за фермой айпи адресов IPv4.
Поэтому буквально в несколько движений мы просто закрываем ботофермам саму возможность соединения с нашим сайтом. Боты просто перестают его видеть, нелегитимный трафик на сайт как резко возрос, так резко и падает. К первоначальным значениям.
Подпишитесь на Telegram канал / MAX для того, чтобы всегда быть в курсе последних новостей и обновленных настроек для защиты от ботов, а также оперативно получать новые материалы, выходящие на antibot24.ru

Автор статей: Сергей (AntiBot24). Эксперт в области фильтрации поведенческого трафика, настройки антибот систем. Высший рейтинг на Kwork, более 680 отзывов, 100% заказов успешно сдано, 56% повторных заказов. Пишу подробные статьи, инструкции по фильтрации ботов в своем блоге antibot24.ru
Всегда нужно иметь в виду, что те советы, которые вы прочли в статьях - это лишь часть настроек, которые я делаю при профессиональной экспертной настройке фильтрации поведенческих ботов. Все остальное - это непубличные профессиональные секреты. Любая информация, становящаяся общедоступной - достаточно быстро устаревает и перестает быть эффективной.
Если вы столкнулись с повышенной роботностью в Яндекс метрике, увеличением числа прямых заходов, увеличением количества отказов - вы всегда можете заказать у меня настройку Killbot.