Cloudflare опублікував свій шостий щорічний огляд року, пропонуючи детальний огляд стану інтернету, безпеки та бурхливого розвитку світу штучного інтелекту. У звіті висвітлюється значна нерівність в активності сканування веб-сторінок. Згідно з даними, бот Google просканував значно більше веб-сторінок, ніж його конкуренти, що використовують штучний інтелект. Зокрема, бот Google відвідав у 200 разів більше сторінок, ніж PerplexityBot.
Це комплексне Огляд Cloudflare збирає дані з величезної мережі, що охоплює понад 330 міст у 125 країнах. Результати показують, що Googlebot охопив 11.6% унікальних веб-сторінок наприкінці 2025 року. Для порівняння, GPTBot від OpenAI досяг лише 3.6%, тоді як PerplexityBot просканував лише 0.06%. Звіт припускає, що це домінування існує тому, що Google використовує підхід подвійного призначення. Googlebot сканує як для індексації пошукових систем, так і для навчання моделей штучного інтелекту. Отже, веб-видавці не можуть блокувати навчання Google за допомогою штучного інтелекту, не видаляючи також свої сайти з Результати пошуку Google.
Огляд Cloudflare: ключові висновки звіту за 2025 рік
Окрім сканування за допомогою штучного інтелекту, звіт містить важливі дані щодо глобального зв'язку та загроз безпеці. Ось конкретні моменти:
- Зростання трафіку: Глобальний інтернет-трафік зріс на 19% у річному обчисленні, з помітним прискоренням після середини серпня.
- Зміни в безпеці: Вперше громадянське суспільство та некомерційні організації стали найбільш атакованим сектором, зіткнувшись з 23.2% атак до липня.
- Блокування тенденцій: Видавці часто блокують ботів, специфічних для штучного інтелекту, таких як GPTBot, за допомогою файлів robots.txt, тоді як Googlebot та Bingbot здебільшого стикаються з частковими обмеженнями для захисту сторінок входу.
- Співвідношення сканування до переходів: Anthropic продемонстрував найвище співвідношення сканування до перенаправлень, тобто він ретельно сканує контент, але повертає дуже мало користувачів на веб-сайти-джерела.
- Сканування дій користувача: Кількість ботів, що діють від імені користувачів (наприклад, ChatGPT, що відповідає на конкретне запитання), зросла більш ніж у 15 разів протягом року.
Також читайте: Статистика подкастів: Зростання ринку, тенденції та стратегії успіху
У звіті також зазначається зміна у складі трафіку. Хоча трафік, згенерований людиною, залишається домінуючим, трафік ботів, що не пов'язані зі штучним інтелектом, значно відстає. До грудня люди генерували 47% запитів порівняно з 44% від ботів. Оскільки інструменти штучного інтелекту продовжують розвиватися, це Огляд Cloudflare служить життєво важливою основою для розуміння того, як ці автоматизовані агенти взаємодіють з відкритим Інтернетом.
Більше новин для читання: Партнерство видавців у сфері штучного інтелекту: Google зміцнює зв'язки
Агенти штучного інтелекту трансформують SEO: Марі Гейнс закликає до дії
