Cloudflare: 34,1% світового трафіку надходить від ботів, а темпи зростання AI-краулерів збільшилися в 8 разів

Згідно з даними в реальному часі, зібраними Cloudflare Radar 4 червня, 34,1% глобального HTTP-трафіку надходить від ботів, тоді як 65,9% — від людей; статистика Cloudflare вказує, що темп зростання автоматизованого трафіку приблизно в 8 разів вищий, ніж у людського. AI-скрейпери становлять близько 22% від усіх бот-трафіків і є другою за величиною категорією після скрейпінгу пошукових систем.

Охоплення AI-скрейперів: Meta-ExternalAgent обійшов GPTBot

(Джерело: Cloudflare Radar)

Частки основних AI-скрейперів у даних Cloudflare:

Meta-ExternalAgent: приблизно 16,3%, уже випередив GPTBot і посідає перше місце

ClaudeBot: приблизно 11,6%

Applebot: помісячний сплеск на 140%, з близько 2,97% підскочив до 7,15%; Cloudflare трактує це як сигнал, що Apple Intelligence посилює інтенсивність збирання даних

GPTBot: його вже випередив Meta-ExternalAgent (конкретна частка коливається)

Cloudflare пояснює, що в різних звітах цифри можуть відрізнятися; наведені дані слід розглядати як напрям тренду, а не як точний рейтинг.

Спроби входу та загальна структура трафіку

Згідно з даними Cloudflare, під час спроб входу на сайтах 94% припадає на ботів. Мобільні пристрої становлять 55,4% глобального трафіку, а десктопи — 44,6%. Cloudflare пояснює, що 34,1% трафіку ботів не дорівнює шкідливому трафіку: він охоплює також сканери пошукових систем, інструменти вебмоніторингу, сервіси інтеграції API та AI-скрейпери тощо. Серед AI-скрейперів навчальні скрейпери (тобто ті, що збирають дані для довгострокового тренування моделей) займають понад 51,5%, а решта припадає на скрейпери для роботи в реальному часі (для оперативних відповідей на запити користувачів).

Поширені запитання

Які типи включає 34,1% трафіку ботів у статистиці Cloudflare?

Згідно з даними Cloudflare Radar, 34,1% бот-трафіку охоплює скрейпери пошукових систем, AI-навчальні скрейпери, інструменти вебмоніторингу, сервіси інтеграції API, а також шкідливі атакувальні програми тощо. AI-скрейпери становлять близько 22% від трафіку ботів і є другою за величиною категорією.

Про що свідчить зростання Applebot на 140% за один місяць?

Дані Cloudflare показують, що Applebot за один місяць зріс приблизно з 2,97% до 7,15%, а приріст становив 140%. Cloudflare трактує це як сигнал, що Apple Intelligence посилює збирання вебданих.

Прогноз CEO Cloudflare Метью Прінса на 2027 рік — підтверджений факт?

Ні. «Трафік ботів у 2027 році перевищить людський» від Метью Прінса — це особисте публічне припущення; у першоджерелі Cloudflare прямо зазначено: «це прогноз, а не вже встановлений факт». Наразі підтверджені дані — частка бот-трафіку 34,1% і те, що темп зростання автоматизованого трафіку приблизно в 8 разів вищий, ніж у людського.