Cloudflare 15 Eylül: AI bot politikası Googlebot’u da kesebilir

15 Eylül 2026 itibarıyla Cloudflare, AI bot politikasında varsayılanları ve mixed-use kuralını netleştiriyor. Üç kategori öne çıkıyor: Search, Agent, Training. Reklamlı sayfalarda yeni domain / yeni site / açık tercih kaydetmemiş free-tier bölgelerde Training ve Agent bot’lar varsayılanda engellenirken Search genelde açık kalıyor.

Kritik nüans: Googlebot, Bingbot ve Applebot tek bot ile hem arama indeksleme hem model eğitimi yapıyor. Cloudflare bunları mixed-use sayıyor ve en kısıtlayıcı uygulanan kuralı uyguluyor. Sonuç: “AI training’i engelle” açıkken Googlebot da 403 yiyebilir. Toplulukta Temmuz–Ağustos 2026’da “Blocked by Block AI training crawlers” etiketli Googlebot 403 örnekleri paylaşıldı.

Operasyon checklist’i:

1. Cloudflare Dashboard → Security → Settings → Configure AI bot policies 2. Explicit tercih kaydet; “hiç dokunmadım” artık varsayılan karardır 3. Training engeli açıkken Googlebot / Bingbot / Applebot için allow kuralı gerekir mi, iş kararı ver 4. 15 Eylül sonrası security event log’da Googlebot 403 taray 5. robots.txt ile Bot Preference Sync eşleşmesini kontrol et

Yayıncı ve SEO ekipleri için mesaj: AI crawl’ı kesmek ile arama indeksini korumak artık aynı toggle’ın iki yüzü. Politika bilinçli seçilmeli; aksi halde “AI’yi kapattık” derken Google’dan düşmek mümkün.