В России в три раза выросло число визитов на сайты через ИИ‑краулеры
К 2026 году на ИИ‑трафик может приходиться до 40% рутинных поисковых запросов
30.07.2025
| Ведомости
Из-за популярности чат-ботов количество поисковых запросов, выполняемых с помощью ИИ-краулеров, которые автономно собирают данные для ответа на запрос пользователя, за первое полугодие 2025 г. выросло почти в три раза год к году и составило 3 млн посещений, рассказал представитель Servicepipe. За первое полугодие 2024 г. количество трафика на российских сайтах, идущего из чат-ботов, составляло около 1 млн визитов.
К таким выводам аналитики Servicepipe пришли, проанализировав более 10 млн посещений российских сайтов из сфер электронной торговли, онлайн-образования, финансов, туризма и медицины и опросив более 500 респондентов.
ИИ-краулеры — это специальные программы (боты), которые автоматически сканируют открытые страницы в интернете, читают текст, распознают изображения, видео и другие данные. Полученная информация используется для обучения языковых моделей (например, ChatGPT, Gemini, YandexGPT), чтобы они могли лучше понимать человеческую речь, отвечать на вопросы, обрабатывать текстовые запросы и выдавать релевантные ответы.
В топ-5 ИИ-краулеров, которые чаще всего собирают информацию на российских сайтах, входят GPTBot (ChatGPT, созданный американской компанией OpenAI), Google-Extended (нейросеть Gemini от американской Google), ClaudeBot (модель Claude от американской Anthropic), DeepSeekBot (китайская нейросеть DeepSeek) и YandexBot (YandexGPT российского Яндекса).
Тренд выражен экспоненциальным ростом — в 2-3 раза год к году, подтверждают эксперты. GPTBot и ClaudeBot — главные источники условного DDoS-эффекта, когда пиковая нагрузка из-за наплыва краулеров может достигать 200 запросов в секунду на один сайт.
Увеличившийся масштаб поиска через ИИ-краулеры подтверждают также данные Cloudflare, говорит заместитель исполнительного директора ЦК НТИ по большим данным МГУ Гарник Арутюнян. Так, общий глобальный трафик за 2024 г. увеличился в среднем на 18%, а в пиковые месяцы рост достигал 32%. Основную долю трафика дают сервисы Google, Bingbot, GPTBot, ClaudeBot, Meta (организация признана экстремистской и запрещена в РФ) ‑ExternalAgent, добавляет он, отметив, что дополнительно бурно растут PerplexityBot и ChatGPT‑User. Perplexity одной из первых сделала краулинг частью своего ядра, остальные сервисы в той или иной мере тоже подключают подобные технологии для генерации ответов, но пока это скорее эксперименты, чем полноценные решения.
Трафик из чат-ботов в этом году показал аномальный рост сразу в нескольких сферах, отмечает директор по продуктам Servicepipe Михаил Хлебунов. На первом месте оказалась электронная торговля, где количество визитов ИИ-краулеров увеличилось на 170%, на втором месте — онлайн-образование (прирост 120%), на третьем — туризм (прирост 110%), перечисляет он. Также трафик заметно вырос на сайтах банков и медиа (+80% в обоих сегментах).
«Причем речь не о единичных всплесках трафика, кривая уверенно ползет вверх. На данный момент существенный рост числа ИИ-краулеров - это, в первую очередь, эффект низкой базы», — подчеркивает Хлебунов. Например, общее количество покупок через чат-боты на текущий момент составляет менее 5% от всех онлайн-покупок, но через 3-4 года минимум 15% всех покупок в e-commerce будет совершаться с их помощью, прогнозирует эксперт.
К основным целям, для которых россияне используют чат-боты, относятся поиск информации (63%), генерация идей (46%), получение персональных рекомендаций (37%), обучение (23%), работа с текстом (16%), перечисляет Хлебунов.
Кроме того, аналитики Servicepipe отмечают важную тенденцию: посетители, приходящие на сайты из чат-ботов с генеративным ИИ, проводят на них больше времени.
Так, они просматривают на 6% больше страниц за визит и имеют на 11% более низкий показатель отказов (процент посетителей сайта, покинувших его после просмотра только одной страницы) по сравнению с трафиком, идущим на сайты компаний из других источников, поясняют в компании.
По словам экспертов, меняется сама модель потребления информации — от активного поиска к диалоговому формату, где система сама предлагает релевантные данные. Особенно ярко это проявляется среди молодой аудитории и в мобильных сценариях использования, добавляет он.
Если темп сохранится, то трафик от ИИ‑агентов вырастет еще на 50-100% к концу 2025 г., считает Арутюнян. Речь, по его словам, идет о 4,5-6 млн визитов за 12 месяцев против 3 млн за первое полугодие.
«За цифрами стоит фундаментальный сдвиг в поведении потребителей: для части пользователей чат-боты уже заменили поиск через классические поисковики. В отдельных нишах, например в ритейле, конверсия по пришедшим из чат-ботов пользователям уже сравнялась с традиционными каналами. По этой причине бизнесу придется адаптироваться к новой реальности, где значительная часть клиентского пути начинается с разговора с ботом».
Михаил Хлебунов
Директор по продуктам Servicepipe
Трафик ИИ-краулеров может достичь 6-8 млн посещений к концу года, что предопределит вероятность ухода пользователей от традиционного поиска, считают эксперты. К 2026 г. ИИ-краулеры могут захватить до 40% рутинных поисковых запросов (новости, фактчекинг), но при этом традиционные поисковики сохранят доминирование в коммерческих и сложных запросах (медицина, юриспруденция) благодаря проверенным алгоритмам.
О полном отказе пользователя от поисковиков действительно пока рано говорить и монополии Google и Яндекса останутся с нами надолго, считает Арутюнян. Тогда как поисковики показывают проверяемые источники, уровень доверия к ним выше, а выдача контролируемая, ИИ-краулеры выдают неточные или искаженные ответы, отмечает собеседник.
По словам представителя Яндекса, с момента появления ИИ-ответов в поиске компании в октябре 2024 г. их ежедневная аудитория выросла в полтора раза и превысила 13 млн пользователей. Всего с такими ответами взаимодействовали более 80 млн человек, добавил он. Также показатель раскрываемости полных ответов Алисы, которые автоматически появляются в результатах поиска, за первое полугодие 2025 г. вырос на 30%. В то же время общее число запросов в поиске растет и во II квартале 2025 г. по отношению к аналогичному периоду 2024 г. увеличилось на 9,8%.
В ближайшие 2-3 года ИИ-краулеры будут дополнять, а не заменять поисковики, считают некоторые эксперты. Их доля в трафике продолжит расти, особенно в нишах, где важны быстрые и структурированные ответы - справки, инструкции, сравнения товаров, но полностью уйти от классического поиска вряд ли получится: пользователи инстинктивно возвращаются к проверенным источникам, когда нужна гарантированная точность.
Ведомости
Ведущее деловое издание России