Новый вид пф-ботов на сайтах, боты от сетей Яндекса с Яндекс.Браузера
Сегодня поговорим об актуальной теме. Многие уже наверняка сталкивались на сайтах с так называемыми ПФ-ботами.
На первый взгляд — это обычные, безобидные боты, которые посещают страницы сайта. Однако их цель — накрутка поведенческих факторов для продвигаемых страниц.
На деле ПФ-боты — это программы или даже целые "фермы" устройств, которые массово открывают сайты, имитируя поведение реального пользователя. Делается это для создания уникального цифрового следа, похожего на тот, который оставляет обычный человек при посещении сайтов и использовании поисковых систем. У каждого из нас тоже есть свой цифровой след — именно на его основе, например, нам показывают рекламу, соответствующую нашим интересам.
И таких ботов действительно много — о них уже написано немало статей. Особенно часто упоминаются боты от ООО Biterika Grupp (AS 35048). Они стали популярны благодаря доступным прокси-серверам, которые позволяют эффективно подменять реальные IP-адреса.
Сегодня речь пойдёт о новой ветке развития таких ботов — ПФ-боты от Яндекса, использующие реальные IP-адреса Яндекса и технологии Яндекс.Браузера .
Накручивает ли Яндекс поведенческие факторы своими ботами?
Недавно в ходе нашей работы мы заметили очень любопытную активность.
Это были боты, которые, судя по всем признакам, полностью принадлежат Яндексу. И речь здесь не о банальной подмене referer или User-Agent, как это часто бывает. Всё указывает на то, что происхождение этих ботов — именно Яндекс: от IP-адресов до других технических признаков.
Отличительная особенность этих ботов — использование протокола HTTP/3 и полная подстановка параметров, характерных для Яндекса. Все входы осуществляются исключительно через Яндекс.Браузер, что делает поведение практически неотличимым от действий реального пользователя.
Боты обычно «спамят» 2-3 страницы сайта, при этом переходы происходят либо напрямую, либо через закладки браузера.
Конечно, мы не утверждаем, что за этими действиями стоит сам Яндекс. Скорее всего, это новый и более изощрённый способ накрутки поведенческих факторов, использующий инфраструктуру и «официальные» параметры Яндекса.
Мы решили уточнить, действительно ли эти боты принадлежат Яндексу. Для этого обратились в техническую поддержку Яндекс.Поиска — и вот что нам удалось выяснить:
- IP-адреса действительно принадлежат Яндексу.
- Это не поисковые боты и другие "хорошие боты" от сервисов Яндекса.
- Специалисты разбираются в ситуации и выясняют, как такое вообще возможно.
Таким образом, можно сделать вывод, что те компании и лица, которые занимаются накруткой поведенческих факторов, нашли новый «уникальный способ» для нечестного повышения позиций сайтов.
Использование инфраструктуры Яндекса и их технологий, имитирующих поведение реальных пользователей, позволяет им обходить стандартные методы обнаружения и достигать своих целей.