Michael Johnson16 Ekim 2026’da Cloudflare, Verified Bots için sürekli değerlendirme sistemini tanıttı. Sistem, gözlemlenen trafiğin robots.txt kurallarına uyup uymadığını ve botların HTTP 429 yanıtından sonra istek sıklığını azaltıp azaltmadığını dikkate alıyor. Şirket bu yaklaşımı, botun kimliğini doğrulamanın yanı sıra davranışını da inceleyen bir yöntem olarak tanımlıyor.
Cloudflare’ın duyurusunda, bir sitenin tercih kurallarına tekrar tekrar uyulmamasının botun güven düzeyini düşürebileceği, kurallara tutarlı biçimde uyulmasının ise bu düzeyi yükseltebileceği belirtiliyor. Sistem, tekil ihlalleri bağlam içinde değerlendiriyor: Cloudflare, münferit olaylar yerine kalıcı davranış örüntülerini incelediğini söylüyor.
Site kuralları nasıl dikkate alınıyor?
robots.txt dosyası, site sahibinin tercihlerini gösteren sinyallerden biri. Sistem, botun gözlemlenen trafiğini bu dosyayla karşılaştırıyor. HTTP 429 (“Çok Fazla İstek”) istemciye istek sıklığını azaltması gerektiğini bildiriyor; Cloudflare, botun yavaşlayıp yavaşlamadığını, istekleri duraklatıp duraklatmadığını ya da aynı hızda istek göndermeyi sürdürüp sürdürmediğini dikkate alıyor.
Site operatörleri için atılabilecek pratik adımlar; robots.txt dosyasını güncel tutmak, uygun istek sıklığı sınırları belirlemek ve HTTP 429 sonrasında istemcilerin davranışını günlüklerden incelemektir. Bu önlemler, sitenin Cloudflare araçlarını kullanıp kullanmadığından bağımsız olarak trafiği kontrol etmeye yardımcı olur.
Şu anda neler sunuluyor?
Cloudflare, Verified Bots’un site tercihlerine uyumunu değerlendirmek için sistemi şimdiden şirket içinde kullandığını bildiriyor. Bir sonraki aşamada sistemi müşterilere sunmayı planlıyor; böylece site sahipleri, Verified Bots trafiğinin nasıl işleneceğine karar verirken kullanılacak güven eşiğini seçebilecek. Şirket ayrıca değerlendirmeleri Cloudflare Radar’da yayımlamayı ve dikkate alınan sinyallerin kapsamını genişletmeyi planlıyor.
Dolayısıyla duyuru, tüm müşterilerin hemen kullanabildiği bir ayarı değil, denetimde yeni bir aşamayı anlatıyor. Site operatörleri açısından önemli değişiklik, değerlendirme ilkesi: botun kimliğinin doğrulanmasına, yayımlanmış kurallara nasıl uyduğunun ve istek kısıtlamalarına nasıl tepki verdiğinin gözlemlenmesi de ekleniyor.