Сколько ботов в беттинговом трафике? Ответ в двух картинках

Как заставить грустить веб-аналитика, который изучает трафик на аффилейтском портале про ставки?

Очень легко: нужно спросить, как он отсекает роботов, чтобы они не корежили всю картину до неузнаваемости.

Проблема получения правильных данных стоит очень остро.

Картинка номер 1: количество пользователей, выполнивших на legalbet.ru относительно редкое и специфическое действие в 2019 году.

Картинка номер 2: тот же самый отчет, но за последние 3 месяца:

Как говорится, почувствуйте разницу. Крохотный, едва различимый сегмент “Прямые заходы” разросся до 77%. При этом в общем трафике, не привязанном к параметрам, такого огромного изменения нет.

Не существует ни одной причины, откуда бы взялось столько живого прямого трафика. Окей, трафик может прийти, но с чего бы этим посетителям так захотелось бежать и кликать по кнопке, которую и найти-то на сайте непросто.

Обратите внимание, что в обоих отчетах задан сегмент “Роботность: Люди” и это особо не помогает. Значимая часть ботов остается неотфильтрованной.

🤷‍♂️ Роботов невероятно много. Поэтому любые цифры из систем аналитики и выводы на их основе нужно воспринимать с изрядной долей скептицизма.

15 комментариев

  1. У меня эти чертовы боты в метрике пары сайтов еще с начала этого года стали целой бедой, крутят бедный яндекс, как хотят, а ему как будто и дела нет, блин.

    • В нашей нише массово еще в прошлом году появились массово и уходить не собираются. Это новая реальность.

      • А переходы стабильно каждый день много или наплывами по 2-3 раз в неделю? Я вот в других нишах замечаю накрутка именно отдельными партиями по несколько сотен прямых заходов.

    • В основном так (особенно явно видно по мобильным и отказам). География разная. Из Москвы много, но и того же Питера почти столько же.

  2. Я Вам больше скажу.
    Современные реалии таковы, что создание бота принципиально неотличимого от
    человека – является тривиальной задачей на полтора часа времени работы человека
    с опытом.

    Покупка пула запросов с десятков тясяч реальных ip адресов (откуда будет
    запускаться такой бот) стоят копейки.

    При этом можно симулировать абсолютно любой трафик, хоть прямые заходы, хоть
    переходы из поисковой системы.
    А если в Вашем распоряжении есть специально оплаченный человек сидящий на
    магистральном хопе, то вы можете быть вообще кем угодно, хоть гуглом. И никакие
    реверс dns запросы вам не помогут.

    И эта проблема, в рамках современной топологии сети, решения не имеет.
    За исключением применения многоуровневых вариативных капча-машинерий, что
    нередко совершенно недопустимо, потому как проще мириться с неадекватностью
    статистики, чем терять реальный трафик на подобных капчах.

    Мне до сих пор удивительно, почему при доступности подобного инструментария в
    свободном доступе, доминирующая часть ботов все еще функционируют на уровне
    2000 годов.

    Впрочем, это возможно потому, что владельцы проектов даже не пытаются
    дифференцировать этот трафик, так как для типичного специалиста – показать
    отчет, хотя бы делающий попытку фильтровать подобный трафик, рядом с отчетом,
    где боты не отфильтрованы вовсе, может сильно сказаться на его зарплате.

    О чем, как мне кажется, совершенно справедливо заявлено в материале.

  3. Не только в вашей нише.
    По совершенно разным типам сайтов боты есть и не только с прямыми заходами.
    Бывает и по 2е страницы проходят.

    Нужно аккуратно фильтровать, иногда и боты яндекса бывают скрытными.

    Некоторый анализ гео наводит на мысль, что за этим стоит кто то крупный

    Фильтрую по таким параметрам (KEITARO):

    Ничего не делать
    Фильтры
    UserAgentисключать”*bot*”, “*YandexSearch*”, “*Media*”, “*Bing*”, “*baidu*”
    и Бот

    Ничего не делать
    Фильтры
    Реферерыпринимать”*youtube*”, “*ok.ru*”, “*vk.com*”, “*t.co*”, “*instagram*” (+5)

    Ничего не делать
    Фильтры
    Типы устройстваисключать”Мобильный телефон”
    и UserAgent исключать”*YandexMetrika*”
    и Языкипринимать”Английский”, “Неизвестен”, “@empty”

    Ничего не делать
    Фильтры
    Рефереры принимать”http:*”

    Ничего не делать
    Фильтры
    Города принимать”Podol’sk”, “Ruza”, “Elektrostal'”, “Dolgoprudnyy”, “Yanino-2″

    Ничего не делать
    Фильтры
    Рефереры принимать”*//www.yandex*”, “*//google*”

    FAKE KZ !!!
    Ничего не делать
    Фильтры
    Страны исключать”Казахстан”
    и Рефереры принимать”*.kz*”

    FAKE BY !!!
    Ничего не делать
    Фильтры
    Реферерыпринимать”*.by*”
    и Страны исключать”Беларусь”

    Fake user
    Ничего не делать
    Фильтры
    Пустой реферер
    и UserAgent исключать”*bot*”, “*YandexSearch*”, “*Media*”, “*Bing*”

    —————
    отсекает большинство ботов

  4. Было бы интересно почитать про то, как этих ботов отсекать. Сравнение разных методов, например…

    • В черновиках есть такая тема, но тут попахивает лонгридом, так что вряд ли быстро соберусь.

  5. Боты везде, и на блогах и на ютубе и на прочем…Кстати не советую работать с беттингом и всем что связанно с ним. Как ни крути на карму будет влиять негативно…
    А я то желаю успехов)

    • Кстати не советую работать с беттингом и всем что связанно с ним.

      Работая в Legalbet, я спокоен за карму. По многим причинам. Для примера достаточно почитать комменты тут: https://legalbet.ru/we-helped/#comments

      А я то желаю успехов)

      Спасибо!

  6. Доброго дня, Алексей!
    Уже больше года наблюдаю подобную ситуацию. Одни говорят, что это проблема, другие – игнорируют.
    Но предложенные вебмастерами подходы пока не способны адекватно решить вопрос. Боты идут отовсюду – они могут быть “гуглом”, “яндексом”, прямыми заходами и через выдачу.
    Хотя, опять же зависит, от того, чего именно нужно достичь – кого-то устроит просто убрать метрику.
    А вообще, любая капча или блокирование и отсечение целых подсетей – это, считаю, так или иначе, выстрел в реальных пользователей. Будет интересно почитать Ваш лонгрид.

Оставить ответ