Bir siteye gelen otomatik trafik artık yalnız arama motoru örümceklerinden oluşmuyor. Arama dizini kuran bot, yapay zekâ modeli için veri toplayan tarayıcı, kullanıcı adına sayfa açan ajan ve SEO ölçüm aracı aynı URL’yi ziyaret edebilir; fakat içerikle ne yaptıkları aynı değildir. Cloudflare’ın 28 Ağustos 2026’da duyurduğu BotBase for Operators, bot işletmecilerinden yalnız “Ben kimim?” değil, “Ne yapıyorum, içeriği nasıl kullanıyorum ve kimin adına çalışıyorum?” sorularına da cevap vermelerini istiyor. Site sahibi açısından önemli olan, bu beyanı körü körüne güvenilir kabul etmek değil; trafik kararına ek bir sinyal olarak kullanmak.

BotBase nedir, yeni olan ne?

BotBase, Cloudflare’ın bilinen botları arayıp filtrelemeye yarayan dizini. 28 Ağustos güncellemesi dizinin işletmeci tarafını genişletti. Tüm Cloudflare müşterileri panelde bot başvurusu yapabiliyor; başvurunun inceleme beklediğini, kabul edildiğini veya gerekçesiyle reddedildiğini görebiliyor. Kabul edilmiş ya da bekleyen bir kayıttaki bilgiler değiştiğinde başvuruyu düzenlemek de mümkün.

Bu, internetteki her botun doğrulandığı veya Cloudflare’ın bir botu “iyi” ilan ettiği anlamına gelmiyor. Dizin, kimlik ve davranış hakkında düzenli bilgi sağlıyor. Son izin kararı yine her site sahibine ait.

Yeni davranış beyanının üç parçası

Bot ne yapıyor?

Başvuruda tek bir kaba etiket yerine birden fazla davranış seçilebiliyor. Bot arama dizini kurabilir, kullanıcı adına ajan olarak çalışabilir, veri toplayabilir, model eğitebilir veya SEO aracını besleyebilir. Bir botun birden fazla iş yapabildiğinin kabul edilmesi önemli; “AI botu” etiketi tek başına karar vermek için fazla geniştir.

Okuduğu içeriği nasıl kullanıyor?

Bir sayfadan kısa arama özeti çıkarmakla içeriği model eğitiminde saklamak aynı işlem değil. Cloudflare, bot işletmecisinin kullanım düzeyini beyan etmesini ve bunu sitenin içerik tercihiyle karşılaştırmayı hedefliyor. Blogdaki örnekte search=yes, ai-train=no ve use=reference sinyalleri; arama indeksine ve referans kullanımına izin verip model eğitimini reddeden bir tercihi anlatıyor.

Bu içerik sinyallerinin bütün internet botları için bağlayıcı bir yasa olmadığını ayırmak gerekir. Bir beyan ve politika mekanizmasıdır; hukuki izin, lisans sözleşmesi veya teknik erişim kontrolünün yerine geçmez.

Botu gerçekte kim çalıştırıyor?

Doğrudan işletmeci kendi altyapısından kendi amacı için tarama yapabilir. Aracı platform ise başka şirketlerin ürünleri adına istek taşıyabilir. Genel amaçlı bir yapay zekâ servisinin, üçüncü taraf uygulamadaki kullanıcı sorusuyla sayfa açması ikinci duruma örnektir. Bu ayrım, günlüklerde aynı altyapıdan gelen trafiğin niyetini daha doğru yorumlamaya yardım eder.

“Verified” rozeti tek başına izin değildir

Cloudflare başvuruları otomatik kontrollerden geçiriyor: yinelenen kayıt var mı, user-agent deseni başka botlarla çakışıyor mu, açıklanan IP listesi veya ters DNS gerçekten doğrulanıyor mu, Web Bot Auth imzası geçerli mi? Şirket, yeni bot başvurusu hacminin 2023’ten bu yana yaklaşık yedi kat arttığını ve her kaydı yalnız elle incelemenin ölçeklenmediğini söylüyor.

Doğrulanmış kimlik, botun söylediği kişi olduğunu gösteren güçlü bir sinyaldir. Botun iş modelini, veri saklama süresini veya içeriğiniz için yararlı olduğunu otomatik olarak kanıtlamaz. Kimlik doğrulama ile davranışa izin verme iki ayrı karardır.

Türkiye’deki site sahipleri için karar matrisi

Haber sitesi, e-ticaret mağazası, destek dokümantasyonu ve kişisel blog aynı kurala ihtiyaç duymaz. Önce içeriğin ekonomik ve mahremiyet değerini sınıflandırın:

  • Arama görünürlüğü gereken herkese açık içerik: Bilinen arama botlarına izin verin; hız ve tarama yükünü izleyin.
  • AI referans trafiği istediğiniz makaleler: Kullanıcı adına erişen ajanlarla model eğitimi yapan tarayıcıları ayırın.
  • Ücretli veya üyeye özel içerik: Bot beyanına güvenmek yerine oturum ve erişim kontrolü kullanın.
  • Kişisel veri veya müşteri paneli: robots.txt yeterli değildir; kimlik doğrulama ve yetkilendirme zorunludur.

AI cevaplarının blog trafiğine etkisini daha geniş açıdan görmek için Google’da AI cevaplar ve blogların geleceği yazısındaki ölçüm yaklaşımıyla bu bot günlüklarını birlikte değerlendirebilirsiniz.

15 dakikalık bot trafiği testi

  1. Son yedi günlük sunucu veya CDN günlüklarında en çok istek yapan user-agent’ları çıkarın.
  2. Yalnız ada bakmayın; IP, ters DNS veya imzalı bot doğrulamasını kontrol edin.
  3. Botun Cloudflare BotBase gibi bir dizinde davranış ve içerik kullanım beyanı olup olmadığına bakın.
  4. İsteklerin hangi dizinlere, ne hızda ve hangi saatlerde geldiğini ölçün.
  5. Arama görünürlüğü, referans trafik, sunucu maliyeti ve içerik lisansı hedeflerinizi yazın.
  6. İzin, hız sınırlama veya engelleme kararını bot sınıfı bazında verin.
  7. Değişiklikten sonra organik trafik ve sunucu yükünü en az bir hafta karşılaştırın.

Kısa kontrol listesi

  • Botun kimliği teknik olarak doğrulanıyor mu?
  • Beyan edilen davranış ile gerçek istek deseni uyuşuyor mu?
  • Arama indeksleme ile model eğitimi ayrı ele alındı mı?
  • Üyelik ve kişisel veri gerçek erişim kontrolüyle korunuyor mu?
  • Engelleme kararı SEO ve referans trafik ölçümüyle sınandı mı?
  • Kural düzenli olarak yeniden gözden geçiriliyor mu?

BotBase’in asıl yeniliği, otomatik trafiği “izin ver/engelle” düğmesinden önce tanımlanabilir davranışlara ayırması. Daha iyi karar için kimlik, amaç, içerik kullanımı ve gerçek trafik birlikte okunmalı; rozetlerden hiçbiri tek başına yeterli değil.

Kaynak