cloudflare Telah merilis Laporan Tahunan keenamnya, yang menawarkan tinjauan mendetail tentang kondisi internet, keamanan, dan dunia AI yang berkembang pesat. Laporan tersebut menyoroti perbedaan besar dalam aktivitas perayapan web. Menurut data, Googlebot merayap halaman web jauh lebih banyak daripada pesaingnya yang berbasis AI. Secara spesifik, bot Google mengunjungi 200 kali lebih banyak halaman daripada PerplexityBot.
komprehensif ini Ulasan Cloudflare Data tersebut diambil dari jaringan besar yang mencakup lebih dari 330 kota di 125 negara. Temuan menunjukkan bahwa Googlebot mencapai 11.6% dari halaman web unik pada akhir tahun 2025. Sebagai perbandingan, GPTBot dari OpenAI Googlebot hanya mencapai 3.6%, sementara PerplexityBot hanya merayapi 0.06%. Laporan tersebut menunjukkan bahwa dominasi ini terjadi karena Google menggunakan pendekatan dwifungsi. Googlebot merayapi untuk pengindeksan mesin pencari dan pelatihan model AI. Akibatnya, penerbit web tidak dapat memblokir pelatihan AI Google tanpa juga menghapus situs mereka dari mesin pencari. Hasil Penelusuran Google.
Tinjauan Cloudflare: Temuan Utama dari Laporan 2025
Selain pengumpulan data berbasis AI, laporan ini menyediakan data penting mengenai konektivitas global dan ancaman keamanan. Berikut adalah poin-poin pentingnya:
- Pertumbuhan Lalu Lintas: Lalu lintas internet global meningkat sebesar 19% dibandingkan tahun sebelumnya, dengan percepatan yang signifikan setelah pertengahan Agustus.
- Pergeseran Keamanan: Untuk pertama kalinya, masyarakat sipil dan organisasi nirlaba menjadi sektor yang paling banyak diserang, menghadapi 23.2% serangan hingga bulan Juli.
- Tren Pemblokiran: Penerbit sering memblokir bot khusus AI seperti GPTBot melalui file robots.txt, sementara Googlebot dan Bingbot sebagian besar menghadapi pembatasan parsial untuk melindungi halaman login.
- Rasio Merangkak-ke-Merujuk: Anthropic menunjukkan rasio perayapan terhadap rujukan tertinggi, yang berarti ia memindai konten secara intensif tetapi hanya mengirim sedikit pengguna kembali ke situs web sumber.
- Perayapan Tindakan Pengguna: Bot yang bertindak atas nama pengguna (seperti ChatGPT yang menjawab pertanyaan tertentu) tumbuh lebih dari 15 kali lipat sepanjang tahun.
Baca Juga: Statistik Podcast: Pertumbuhan Pasar, Tren, dan Strategi untuk Sukses
Laporan tersebut juga mencatat pergeseran komposisi lalu lintas. Meskipun lalu lintas yang dihasilkan manusia tetap dominan, lalu lintas bot non-AI berada di urutan berikutnya. Pada bulan Desember, manusia menghasilkan 47% permintaan dibandingkan dengan 44% dari bot. Seiring dengan terus berkembangnya alat AI, hal ini Ulasan Cloudflare Ini berfungsi sebagai dasar penting untuk memahami bagaimana agen otomatis ini berinteraksi dengan web terbuka.
Berita Lainnya Untuk Dibaca: Kemitraan AI Penerbit: Google Memperkuat Hubungan
