Блокировать ботов и бороться с кликфродом стало проще: и это действительно факт, от сервиса "Бот-фактор"
20.08.2018 Безопасность
В закладки

Блокировать ботов и бороться с кликфродом стало проще: и это действительно факт, от сервиса "Бот-фактор"

Свежий взгляд на новую защиту от ботов, переоценку ценностей, историю развития плохого бот-трафика, кликфрода и "Индустрию накруток"


Немного предыстории: откуда у бот-трафика ноги растут?

Первые боты широкого пользования стали появляться в России с 2003 года вместе с активным развитием интернета, а также сервисов M-agent и ICQ: подкованный разработчик мог запросто написать программу, которая имитировала ролевое общение "знакомство с девушкой" или набор ботом соответствующего URL сайта в поисковой строке.

Сильным толчком для развития бот-трафика, стал рост электронной коммерции и рекламного рынка вокруг неё.
Боты стали делиться на два вида: тех, кто "гонит" трафик на сайт, и тех кто "скликивает рекламу конкурентов".

Раньше, предложение таких услуг, как быстрое продвижение в ТОП, за счет поведенческого фактора - было открытым; но затем поисковики прикрыли лавочку (2013-2015 годы), и рынок бот-трафика приобрёл яркий оттенок "черного".

"Индустрия накруток" - это целая бот-мафия с превосходно структурированной системой "вход-выхода". Каждый "смотрящий" следит за вверенной сферой продаж, собирает деньги с рекламных агентств, и просто "грабит" ничего не подозревающих новичков.

С 2017 года, многие ведущие агентства мира официально объявили войну фальшивому бот-трафику.

Заблокировать бота: "Было-стало"


Обычно, борьба с ботами сводилась к колдовству над файлом robots.txt, либо упованием на письма в тех.поддержку Яндекс/Google.

Не совсем эффективные и время затратные способы, сменили первые дорогие автоматические сервисы обнаружения и блокировок ботов из тизерных сетей. Которые, в народе так и не стали популярны: один загнулся из-за распри среди создателей, а история другого вовсе печальна - когда дела пошли плохо, ребята стали сами подгонять бот-трафик на клиентские сайты, чтобы вскоре за деньги его блокировать.

"Бот-фактор" - это принципиально другая история, которую всё-же нельзя сравнивать с предыдущими.

Вот главные отличия:

  • Сканирование и блокировка ботов абсолютно бесплатны;
  • Регистрация доступна любому у кого есть свой сайт;
  • Для работы необходимо добавить на свой сайт всего два кода (либо вставкой в шаблон конструктора типа WordPress, либо в исходный html) - один код отвечает за аналитику, другой за блокировку.


И самое важное:
- "Бот-фактор" анализирует и блокирует весь бот-трафик со всего интернета (поиск, соц.сети, мессенджеры, директ и др.), что снижает риск обмана пользователей примерно до "0".

Теперь достаточно просто пройти регистрацию, добавить коды-скрипты, и получать аналитику (которая кстати, по интерфейсу очень похожа на Яндекс.Метрику).


Принципиальная позиция "Бот-фактор" - решение блокировки бота, пусть даже плохого, остается за пользователем, и данные клиентских метрик не разглашаются. Этот момент говорит о том, что создатели признают наличие той самой индустрии, которая кого-то кормит, а у кого-то отбирает. Но предпочитают оставаться лояльными ко всем (русский подход :) ).

Личный опыт охоты за ботом-парсером.


Вы без труда найдёте множество статей о вреде плохих, или ещё их называют, вредных, ботов.
Решение "блокировать или нет" - я выбрал сам, поскольку:

  • Был ещё слишком глуп и мал, когда подумал, что свою первую рекламную кампанию не так настроил (де факто, был скликан)
  • Проблемы с кликфродом на своих проектах давно устранил самостоятельно, но пройти мимо "БФ" не смог, поскольку осталась ещё одна: кража e-mail из контактных форм и парсинг статей.

Больше всего меня беспокоил вот этот бот:
Блокировать ботов и бороться с кликфродом стало проще: и это действительно факт, от сервиса "Бот-фактор"
"Advanced" - бот-парсер, ворующий статьи и контакты.
Я не стал его блокировать сразу, и подождал две недели, чтобы поймать вживую
и посмотреть откуда он-таки пришёл. Разглашать источник, пожалуй не буду.

Август, 2018 год.
Я взял, и сам заблокировал бота. Без перекапывания robots.txt, без просьб, без жалоб, без ходатайств.

Круто, что это стало возможно. Круто, это что независимость.
Пожалуй, труда Яндекса по "выявлению недобросовестных кликов" в таком раскладе даже достаточно.

О том, кто такие "Бот-фактор"


При знакомстве с сервисом, я первым делом написал в местную тех.поддержку, чтобы уточнить юридические тонкости (на самом деле, хотелось просто познакомиться - если бы не ответили, или стали быдлить, пользоваться бы 100% не стал; это принцип).

Российская компания, стартап, немного попсовый на мой взгляд, по подаче (хотя чего ожидать от бесплатного предложения);
Выкупили у голландского холдинга эксклюзивное право на дистрибуцию сервиса под нашей (русской) разработкой платформы Witstroom (в данный момент на английском языке), собирают клиентов и зарабатывают на B2B.
В планах "Бот-фактора" стать одной из немногих бесплатных прикладных программ в E-маркетинге.

Теперь, о минусах и хайпожорах

  1. "Бот-фактор" подразделяет ботов на 5 категорий, но пока ещё не понятно какой конкретно бот под какую категорию попадает:
    если для ботов-загрузчиков, бот-нетов, и парсеров почетные места отведены, то динамические IP и прочие потайные монстры ещё путаются в рангах, соревнуясь за титулы.
  2. Как официальные поисковые машины, соц.сети, рекламные агентства и web-мастера, чью деятельность так или иначе, в локальной ситуации затронет негативный бот-трафик , станут себя вести? Будут ли всерьёз воспринимать бот-отчеты системы Witstroom?


"Бот-фактор" (он же "Ботфак") на рынке всего один сезон, а инсайды из той самой Индустрии уже жалуются на несущественный спад клиентской активности и отказах работать, когда выясняется, что в "проверенном" трафике присутствует "бот".

Для меня пока что очевидный вывод один: появился первый независимый и бесплатный сервис - который дает возможность свободной оценки трафика у себя на сайте. ИМХО: ничего не мешает, лишний раз встряхнуть партнеров и спросить "Слушайте, друзья, а гоните ли вы часом ко мне на сайт ботов?"

P.S.: и боты станут лучше, и бот-трафик когда-нибудь пройдёт.

Испытывал ли ваш сайт проблемы с негативным бот-трафиком?


Материал подготовил(а): Rumyanzev
Понравилось: 0
Комментарии (0)
Добавить комментарий
Прокомментировать
Войти через: