Фонд Wikimedia сообщает о снижении просмотров страниц Wikipedia реальными пользователями после пересмотра системы обнаружения ботов. В качестве вероятных причин названы AI-поиск и социальные платформы.
Что изменилось в данных
В мае Wikimedia зафиксировал необычно высокий трафик. Изначально он казался человеческим, но расследование показало, что это были боты, разработанные для уклонения от обнаружения.
Фонд обновил свои системы обнаружения ботов и применил новую логику для переклассификации трафика с марта по август.
Как отметил Маршалл Миллер, старший директор по продукту, пересмотренные данные показывают «снижение примерно на 8% по сравнению с теми же месяцами 2023 года».
В WMF предупреждают, что сравнения требуют осторожной интерпретации, поскольку правила обнаружения ботов со временем менялись.
Роль AI-поиска
Миллер связывает это снижение с тем, как генеративный ИИ и социальные платформы меняют способ получения информации.
Он написал, что поисковые системы «предоставляют ответы напрямую пользователям, часто основываясь на содержании Wikipedia».
Это создает ситуацию, при которой Wikipedia служит исходным материалом для функций поиска на основе ИИ, не генерируя при этом трафик на сам сайт.
Роль Wikipedia в AI-системах
Снижение трафика происходит на фоне растущей зависимости ИИ-систем от Wikipedia как источника информации.
Исследование Profound, проанализировавшее 680 миллионов цитирований ИИ, показывает, что на Wikipedia приходится 47,9% среди 10 самых цитируемых источников в ChatGPT. Для Google AI Overviews доля Wikipedia в топ-10 составляет 5,7%, в то время как Reddit — 21,0%, а YouTube — 18,8%.
WMF также сообщил о 50% росте потребления пропускной полосы ботами ИИ с января 2024 года. Эти боты сканируют контент в основном для обучения моделей компьютерного зрения.
В 2021 году Wikipedia запустила Wikimedia Enterprise — услугу коммерческого доступа к данным с соглашением об уровне обслуживания для крупных повторных пользователей, включая поисковые и AI-компании.
Почему это важно
Если трафик Wikipedia падает, в то время как она является самым цитируемым источником для ChatGPT, это означает, что модель, поддерживающая создание контента, нарушается. Вы можете производить авторитетный контент, от которого зависят ИИ-системы, и при этом видеть снижение реферального трафика.
Сложившаяся структура стимулов предполагает, что издатели получают выгоду от создания материалов, которые питают ИИ-ответы, но данные Wikipedia показывают, что это предположение не работает.
Отслеживайте, как AI-функции влияют на ваш трафик, и приводит ли цитирование к значимому вовлечению.
Взгляд в будущее
WMF заявляет, что будет продолжать обновлять системы обнаружения ботов и следить за тем, как генеративный ИИ и социальные сети формируют доступ к информации.
Wikipedia остается основным набором данных для современных поисковых и ИИ-систем, даже когда пользователи не посещают сайт напрямую. Издателям следует ожидать аналогичной динамики по мере расширения функций ИИ-поиска на различных платформах.