- Bot dan scraper AI akan segera menyalip pengguna manusia di internet
- Penerbit sedang berjuang melawan penurunan rasio klik-tayang
- instruksi robots.txt sebagian besar diabaikan
Data baru mengklaim bot AI dengan cepat mengambil alih lalu lintas web biaya tol informasi menunjukkan terdapat kunjungan bot AI baru untuk setiap 31 kunjungan manusia pada bulan-bulan terakhir tahun 2025, naik dari 1:200 pada awal tahun 2025.
Pada saat yang sama, dan dengan interaksi manusia yang lebih langsung dengan AI, kunjungan manusia turun sekitar 5% antara Q3 dan Q4 tahun 2025.
Dan jelas bahwa penggunaan AI oleh manusia bertanggung jawab atas perubahan ini – sementara pelatihan perayapan turun sekitar 15% antara Q2 dan Q4 2025, bot RAG meningkat sekitar 33% dan pengindeks pencarian AI meningkat sekitar 59%.
Cara kita mengakses Internet berubah secara mendasar
OpenAI memimpin dalam hal scraping – bot RAG-nya ‘ChatGPT-User’ lima kali lebih aktif dibandingkan bot paling aktif kedua menurut Meta, dan sekitar 16x lebih tinggi dibandingkan agen Perplexity.
Dalam hal perilaku pengguna, survei terpisah yang dikutip dalam laporan tersebut menemukan lebih dari sepertiga (37%) pengguna AI aktif kini memulai penelusuran dengan kecerdasan buatan (seperti ChatGPT atau Gemini) dibandingkan penelusuran tradisional.
Yang lebih mengkhawatirkan lagi, analisis tersebut menemukan bahwa robots.txt, serangkaian instruksi untuk memberi tahu bot otomatis bagian halaman mana yang dapat dan tidak dapat dirayapi, rata-rata diabaikan sekitar 30%, dan hingga 42% oleh Pengguna ChatGPT.
Karena robots.txt tidak dapat diterapkan dan sepenuhnya bergantung pada niat baik, instruksi tersebut dianggap sudah usang.
Dan itu bukan satu-satunya kabar buruk bagi penerbit, yang kesulitan dalam masalah lalu lintas. Situs tanpa kesepakatan lisensi AI langsung mengalami penurunan rasio klik-tayang (RKT) sekitar 3x antara Q2 dan Q4 tahun 2025. Bahkan situs yang memiliki kesepakatan lisensi AI pun tidak kebal, dengan tingkat CTR yang juga menurun.
Dengan semua hal ini, Tollbit menyerukan kepada regulator untuk turun tangan dalam menetapkan pola AI yang dapat diterima dan melindungi kekayaan intelektual.
Namun dengan tidak adanya perkembangan AI, jelas bahwa internet sedang mengalami perubahan besar dan pemilik situs web harus mempersiapkan bot AI untuk menjadi pembaca utama mereka.
Ikuti TechRadar di Google Berita Dan tambahkan kami sebagai sumber pilihan untuk mendapatkan berita, ulasan, dan opini pakar kami di feed Anda. Pastikan untuk mengklik tombol Ikuti!
Dan tentu saja Anda juga bisa Ikuti TechRadar di TikTok untuk berita, review, unboxing dalam bentuk video, dan dapatkan update rutin dari kami Ada apa juga.
