Роскомнадзор направил письмо к провайдерам хостинга, советуя им ограничить доступ иностранных ботов к российским сайтам. Среди них — Googlebot, GPTBot от OpenAI и Apple Bot от Apple. Письмо Центра управления связью общего пользования (ЦМУ ССОП) Роскомнадзора с которым удалось ознакомиться «Ъ» содержит рекомендации о настройке блокировки сбора данных этими роботами с российских ресурсов.
Ограничение доступа зарубежных ботов к российским сайтам обосновывается необходимостью защиты данных о критических уязвимостях, а также предотвращения анализа информации о пользователях.
Чем грозит блокировка зарубежных ботов-индексаторов?
Эксперты отмечают, что эти рекомендации могут стать обязательными, что повлечет за собой рост конкуренции за трафик между провайдерами. Хотя на данный момент перечень рекомендованных к блокировке ботов не включен в реестр блокировок Роскомнадзора, эксперты предупреждают, что массовая блокировка этих роботов может повлиять на стабильность работы IT-систем.
Представители индустрии также указывают на риск потери трафика для российских компаний, особенно для тех, чьи бизнесы зависят от поискового трафика, так как многие роботы используются для индексации сайтов в поисковых системах, включая Google.
В России, согласно исследованию агентства интернет-маркетинга impulse.guru, доля поисковика Google на конец 2023 года составила 36,95% — за год она уменьшилась на 10,53%: в 2022 году этот показатель составлял 47,48%, тогда как поиск «Яндекса» на первом месте — 48,11%. Разрыв между лидерами сократился по сравнению с первой половиной 2021 года.
Популярность «Яндекса» за эти годы выросла, по мнению авторов исследования, благодаря закону: с 1 июля 2020 года на все смартфоны, компьютеры, планшеты и телевизоры с функцией Smart TV, продающиеся в России, устанавливается российское ПО. Предустановка «Яндекс.Браузера» с поисковиком Яндекса по умолчанию помогла повысить долю пользователей. Известно, что Google не отстает и платит довольно большие деньги Apple, чтобы поисковая система устанавливалась на iPhone, производимые компанией.
Читать материалы по теме:
Microsoft, Amazon и Google с 20 марта ограничивают работу на территории России
Авторизация через Google и Apple на российских сервисах станет невозможной
Spotify, Google и еще 10 зарубежным компаниям грозят многомиллионные штрафы в России
Особо опасные: в России появится список VPN-сервисов для обязательной блокировки