Menu
Почему Яндекс не борется с ботами. Восстанавливаются ли позиции сайта после блокировки бот-трафика.
Хоть я и не сеошник, а занимаюсь именно фильтрацией поведенческих ботов, приходят ко мне именно с таким вопросом. Удовлетворю ваше любопытство: шанс есть.
Большинство клиентов приходит после того, как у них на сайте резко выросло число прямых переходов (значительно - это больше чем 10-20% от числа поисковых переходов на графике в метрике), а также переходов "с сайтов". Фактически, нашествие ботов.
Переходы с сайтов - это обычно тоже ботный трафик прямых переходов, только с поддельным реферером. В настройках ботофермы имеется txt списочек с адресами реальных сайтов, и при каждом визите бота из него берется рандомный, случайный адрес, и подставляется в реферер.
Про utm_source= уже отдельно расписывать не буду, и так очевидно, что в графе "Переходы по рекламе" у тех, кто рекламу в Директ не размещает, все переходы - ботные. Просто раскройте эту строку, посмотрите на "Другая реклама: определено по меткам", и вы все поймете.
Техническая поддержка Яндекс, в лице вездесущего Платона Щукина, десятилетиями высылает один и тот же шаблон.
Только вот практика свидетельствует от обратном. О ужас, Платоны врут. Ну или как минимум - не договаривают.
Сначала количество прямых переходов на сайте медленно, но неуклонно начинает расти. Причем, это, как правило, отказные переходы, и везде это первый визит на ваш сайт. Ваш сайт так популярен, что на него почему-то приходят только одноразовые ноунеймы, которые, наверное, его добавили в закладки. Но при этом из этих закладок они приходят каждый раз как в первый класс.
Однако, сайтовладельцы верят в чудо, и радуются возрастающей популярности своего детища. А вдруг это настоящие посетители.
И вот в какой-то момент, те позиции в поисковой выдаче, которые были более-менее стабильны, начинают "отваливаться", сайт теряет поисковый трафик. У владельца сайта возникает закономерный вопрос: за що?!?!
Платон же сказал, что все будет хорошо, как же так. Соврал? Никогда такого не было, и вот опять.
Откройте отчет Поведение - Вебвизор. Если Вебвизор у вас выключен, - вы сам себе редиска. Включите, замените код метрики на сайте, и ждите, пока накопится статистика.
Сделайте срез по какому-то из видов трафика. Например, прямые заходы.
А там, о чудо, один и тот же бомонд:
Причем, понаблюдайте за графой с ботами "public vlans of DC" на скриншоте. Они не просто заходят, дают отказ и уходят. Они еще и активничают, имитируют реального посетителя, ходят по страницам. В шаблон заложено открытие 4 или 5 страниц сайта, время около минуты.
Стрелками на скриншоте выше отмечено то, что точно боты, без вариантов. Как видите, это почти вся таблица переходов на сайт.
Это только малая часть тех IP сетей, которые вы видите в метрике прямо сейчас. Сегодня одни сети, завтра другие. Еще год назад половина Рунета страдала от ботов с Biterika Grupp OOO, QWARTA LLC, SVS Communication network, Мегафона и Ростелекома (боты Ростелеком Краснодар), сегодня же плохой трафик с этих сетей уже практически незаметен. Зато совершают набеги боты из Китая или боты из Сингапура.
Просто процесс этот в динамике видят только профессионалы, которые работают с трафиком каждый день.
Если блокировать всех, кто был замечен в поддельных, ботных переходах, вам придется заблокировать ВЕСЬ Интернет.
Это только из желудка есть только один выход.
А в случае с поддельным ботным трафиком на сайт, вариантов несколько.
Однажды на сайт в такой тематике, которая не имеет сезонности, напали злые боты. Всячески угнетали его прямыми заходами, причем прямых переходов стало больше, чем переходов из поисковой выдачи.
И вот, владелец сайта понял, что так жить нельзя, нужно что-то делать. Доколе!
Жалкие 250 посетителей с поиска в день, для сайта с большим количеством текстов, которые просто обязаны генерировать трафик - это критически мало. И вот, в начале августа (левая часть графика на скриншоте) были настроены все необходимые правила фильтрации. При этом нужно понимать, что с точки зрения SEO на сайте также все хорошо, его владелец устранил все косяки и недочеты.
Постепенно, в течение месяца, Яндекс стал благоволить к этому сайту, началось какое-то оживление в поисковом трафике. А уже через месяц количество переходов с Яндекс увеличилось в 3 раза.
Но и это еще не все. Далее последовал "взрыв" поискового трафика (правая часть графика, в 17 раз по отношению к трафику до фильтрации), причем качественного, живого, с огромным числом различных средне и низкочастотных фраз, вся графа "Фраза" в Вебвизоре Яндекс забита этими НЧ и СЧ.
Обязанность следить за чистотой трафика - это обязанность владельца сайта. Как бы не ездила вам по ушам техническая поддержка Яндекс, и как бы вам не было лениво, их алгоритм рано или поздно пессимизирует ваш сайт. А если вы еще и размещаете на своем сайте рекламу РСЯ, и при этом сидите на попе ровно, в ожидании погоды с моря - вы получите бан.
Поэтому действуйте, не спите. Увидели рост прямых переходов - решайте проблему, не ждите, что оно само рассосется. Ну или осваивайте рабочую специальность, это востребовано. Сайтостроение - это не ваше.
Cloudflare окончательно заблокирован в РФ ещё летом 2025 года.
Функцию фильтрации ботов Cloudflare взял на себя российский антибот Killbot.
Принцип работы отличается от привычного, отслеживаются не знакомые всем при настройке других антибот решений параметры (входящие IP адреса, AS подсети ботов, User Agent и прочее, всё это легко подделывается), а уникальные для каждого набора браузеров слепки.
По отличию оригинального браузера от модифицированного, тот или иной заход определяется либо как заход реального посетителя, либо как заход бота.
Чтобы не повторяться - расписывал более подробно в статьях:
Попробовать бесплатно. При регистрации в Killbot введите промокод
promo13
и получите месяц тестирования платного тарифа Killbot (фильтрация трафика, 1000 руб) и Ads (отключение показа рекламы поведенческим ботам, 1000 руб) в качестве бонуса. Этого вам хватит на то, чтобы понять, подходит вам данное решение, или нет. На данный момент - в Рунете нет более достойной альтернативы, по соотношению цена-качество. Срок действия промокода ограничен по времени, куда-то записывать его нет смысла. В следующий раз промокод уже будет другой, поэтому использовать его нужно сейчас, когда вы читаете этот текст. Промокод действует только в форме регистрации. Если аккаунт уже создан - создайте новый, на другой почте, и при регистрации в последнем поле введите промокод.
Подпишитесь на Telegram канал / MAX для того, чтобы всегда быть в курсе последних новостей и обновленных настроек для защиты от ботов, а также оперативно получать новые материалы, выходящие на antibot24.ru
Автор статей: Сергей (AntiBot24). Эксперт в области фильтрации поведенческого трафика, настройки антибот систем. Высший рейтинг на Kwork, более 680 отзывов, 100% заказов успешно сдано, 56% повторных заказов. Пишу подробные статьи, инструкции по фильтрации ботов в своем блоге antibot24.ru
Всегда нужно иметь в виду, что те советы, которые вы прочли в статьях - это лишь часть настроек, которые я делаю при профессиональной экспертной настройке фильтрации поведенческих ботов. Все остальное - это непубличные профессиональные секреты. Любая информация, становящаяся общедоступной - достаточно быстро устаревает и перестает быть эффективной.
Если вы столкнулись с повышенной роботностью в Яндекс метрике, увеличением числа прямых заходов, увеличением количества отказов - вы всегда можете заказать у меня настройку Killbot.