Michael JohnsonDne 16. října 2026 Cloudflare představila systém průběžného hodnocení Verified Bots. Sleduje, zda pozorovaný provoz dodržuje pravidla robots.txt a zda roboti po odpovědi HTTP 429 snižují frekvenci požadavků. Společnost přístup popisuje jako posuzování chování, které doplňuje ověření identity robota.
Podle oznámení Cloudflare mohou opakované případy nedodržování preferencí webu snižovat úroveň důvěry robota, zatímco soustavné dodržování pravidel ji může zvyšovat. Jednotlivá porušení systém posuzuje v kontextu: Cloudflare uvádí, že vyhodnocuje dlouhodobé vzorce chování, nikoli ojedinělé případy.
Jak se zohledňují pravidla webu
Soubor robots.txt je jedním ze signálů preferencí vlastníka webu: systém s ním porovnává pozorovaný provoz robota. HTTP 429 („Too Many Requests“) informuje klienta, že má snížit frekvenci požadavků; Cloudflare sleduje, zda robot zpomalí, pozastaví požadavky, nebo pokračuje stejným tempem.
Praktickým krokem pro provozovatele webů je udržovat soubor robots.txt aktuální, nastavit vhodná omezení frekvence požadavků a kontrolovat protokoly, aby zjistili, jak se klienti chovají po odpovědi HTTP 429. Tato opatření pomáhají řídit provoz bez ohledu na to, zda web používá nástroje Cloudflare.
Co je k dispozici nyní
Cloudflare uvádí, že systém už používá interně k hodnocení toho, zda Verified Bots dodržují preference. Dalším krokem bude jeho zpřístupnění zákazníkům; vlastníci webů pak budou moci zvolit práh důvěry, který se použije při rozhodování o tom, jak zpracovávat provoz Verified Bots. Společnost také plánuje zveřejňovat hodnocení v Cloudflare Radar a rozšiřovat soubor zohledňovaných signálů.
Oznámení tedy popisuje novou úroveň kontroly, nikoli nastavení, které už mají k dispozici všichni zákazníci. Pro provozovatele webů je důležitá změna principu hodnocení: ověřenou identitu robota doplňuje sledování toho, jak dodržuje zveřejněná pravidla a reaguje na omezení požadavků.