April 20, 2023

Что такое боты и как от них избавиться

Сегодня поговорим о наболевшем – о том, как избежать проблем из-за ботового трафика. Наверное, каждый арбитражник в своей практике проходил через этот неловкий момент, когда вместо кровно заработанной суммы от партнерки получаешь предупреждение о том, что конверсии ботовые и выплаты не будет. Арбитражник не хотел фродить, трафик сорс все отрицает, партнерка заблокировала аккаунт. Настоящий кошмар наяву, правда? 

 Что такое бот-трафик

Трафик, как таковой – это поток посетителей на сайте, который нужен для того, чтобы ваш сайт приносил доход. Важную роль здесь играет регулярность визитов реальных людей, поскольку она даёт оценку продуктивности вашей площадки и приносит заработок, а вот бот скорее просто создаёт массовку – принести выгоду и реальные доходы он может только своему разработчику. Когда в трафике появляются боты, то вычислить их сразу достаточно сложно, так как они копируют поведение пользователей: переходят по ссылкам, открывают страницы, но не приносят деньги, а наоборот – отнимают их, занимая трафик.

Типы трафиковых ботов

Весь массив трафика, который приходит на сайт, можно условно взять за 100%. Из него приблизительно 50% будет приходиться на чистый трафик, а оставшиеся 50% будут составлять роботы. И вот здесь снова лагерь делиться на две части: хорошие и плохие боты. Их назначение, функции и результаты работы определяют, к какому типу они относятся.

Мусорный трафик – случайные переходы посетителей оказавшихся на сайте через ссылку с сайтов с низкой и сомнительной репутацией. Большинство специалистов кибербезопасности утверждают, что мусорный трафик занимает примерно половину всего бот-трафика.

  • Хороший бот – программы, которые созданы для целевого функционирования какого-либо сервиса. Они сокращают использование человеческого труда и увеличивают скорость обработки данных. Их задачи чётко ограничены, не наносят вред пользователям и не засоряют систему.
    Например, чат-бот, который может общаться, отвечать на вопросы, и обрабатывать запросы клиентов в интернете, то есть заменяет работу человека в некотором роде (поддержка сайта, онлайн игра с противником-ботом). Основные хорошие боты перечислены ниже:

Боты-поисковики
Боты-мониторинга
Краулеры (часть поисковой системы)
RSS-боты (для работы с информационными потоками)

  • Плохой бот – как правило, они внедряются в систему, маскируясь под простых пользователей, что даёт им возможность быть неопознанными какое-то время и захватить как можно большую долю трафика для своих целей. Итак, среди плохих ботов выделяют следующих:

– ботнет – небезопасный бот, который может тайно селиться в компьютере под видом браузера и вести себя как реальный пользователь
– боты, которые настроены на сбор данных о пользователяхв интернете
– спам-бот – боты, которые настроены на распространение некачественного рекламного контента
– боты-вредители, запрограммированные на скупку билетов на транспорт и концерты с последующей спекуляцией
– гейм-боты для онлайн игр, задача которых добывать игровую валюту и разные призовые бонусы, тем самым нанося вряд экономике игры
– боты для DDos–атак, которые препятствуют пользованию сайтом простым пользователям.

Как определить активность бота

Для отличия притока бот-трафика от органического трафика нужно воспользоваться инструментами метрики и фильтрации. Настройки фильтра по различным показателям позволят увидеть картину происходящего в деталях: выявить источник трафика, браузер, устройство и тип операционной системы, с которого выполнялись какие-либо действия, то есть, если у вас на сайте неожиданно появилось огромное количество визитов и их действия не типичны обычным пользователям, то это могут быть боты. Как правило, интернет пользователю нужен какой-то промежуток времени для того, чтобы ознакомиться с вебсайтом, пролистать странички и сделать какое-то количество кликов, в то время как программа бот-трафика работает по указанной схеме.

Чтобы этого избежать, предлагаем Вам следующие способы отсеивания ботового трафика:

  • Вы точно знаете кто бот. 

Если у Вас уже есть база с параметрами ботов, то тут все просто – Вам нужно только занести ее в настройки бот-фильтра.

Для этого переходим в раздел Бот-фильтр, активируем его, выбираем Тип Фильтрация, добавляем ссылку на которую будем слать ботов и ниже заносим параметры в правила фильтрации. Можно выбрать 18 условий для фильтрации, в том числе по sub id.

Далее переходим в кампанию и активируем бот-фильтр на первом шаге.

После этого на втором шаге кампании появится Бот правило. В нем выбираем Фильтр, который настроили ранее- Сохранить.

Готово! Теперь боты с заданными параметрами будут уходить на другую ссылку. Статистику переходов по этому правилу можно посмотреть в Общем отчете для этой кампании.

  • Как узнать кто бот?

Более затратный вариант включает в себя поиск и подключение сторонних ресурсов с готовыми базами. И для больших объемов он действительно лучше. Но если Вы сейчас на ранних этапах запуска кампании, еще не нарастили объемы и не готовы нести дополнительные затраты, предлагаем воспользоваться уже готовым функционалом.

Переходим в раздел Бот-фильтр, только после активации выбираем тип Отслеживание. Таким образом Ваш трафик будет помечаться как ботовый в статистике и идти на специальное правило в кампании.

Но это еще не все. Мы разработали чувствительный анти-фрод детектор, который прогоняет информацию о трафике через 10 метрик и только потом выдает вердикт о его фродовости.

Ознакомиться с вердиктом можно в Общем отчете, отметив чекбоксы Недействительные визиты/клики/конверсии.

Это дает возможность увидеть полную картину того, с каких IP, ISP, Referer,  были подозрительные переходы.

Лайфхаки

?Одним из параметров для определения ботового трафика являются всплески активности посетителей. Например, если в среднем на лендинг у Вас заходит +- 10 человек в час, а потом появилось резкое увеличение посетителей в определенный промежуток времени (скажем, с 10:00 до 10:30 их количество взлетело до 100, а потом опять опустилось), есть повод задуматься о нормальности этого трафика.

В AdsBridge для этого есть почасовая разбивка статистики.

Если у Вас в кампании больше одного оффера, рекомендуем смотреть разбивку по каждому. А если у Вас связка лендинг + оффер – то анализ начинайте с лендингов.

?В подавляющем большинстве у ботов пустой реферер. Поэтому Вы также можете выбрать условие расшивки по пустому рефереру в бот фильтре при типе Фильтрация.

Повод задуматься дают и необычные рефереры, например если домен состоит из набора букв и при переходе по его ссылке в браузере выдает ошибку. Скажем, trdgdjfld.com. Это не обязательно будет ботовый переход, но уточнить у своего менеджера трафик сорса о том, почему трафик идет с таких доменов, лишним не будет.

?Обращайте внимание на похожие IP адреса, большое количество переходов с похожих адресов также может указывать на нечеловеческую активность.

Таким образом, хоть боты и становятся умнее из года в год, отследить такой трафик можно без особых усилий.

 

Берегите свой трафик и высоких Вам конверсий!

Оставить комментарийВаш email будет виден только Вам. Поля, отмеченные звёздочкой, обязательны.