jsonscraper

Cloudflare évaluera les Verified Bots selon le respect des règles des sites

Le système tient compte du respect de robots.txt et de la réaction au code HTTP 429. Cloudflare l’utilise déjà en interne et prévoit de proposer ultérieurement à ses clients un seuil de confiance pour gérer le trafic.

Politique éditoriale Signaler une erreur

Le 16 octobre 2026, Cloudflare a présenté un système d’évaluation continue des Verified Bots. Il prend en compte la conformité du trafic observé aux règles de robots.txt et la réduction de la fréquence des requêtes par les bots après une réponse HTTP 429. L’entreprise présente cette approche comme une vérification du comportement qui complète la confirmation de l’identité du bot.

Article : Cloudflare évaluera les Verified Bots selon le respect des règles des sites
Résumé : Le 16 octobre, Cloudflare a présenté un système d’évaluation continue des Verified Bots. Il tient compte du respect de robots.txt et de la réaction au code HTTP 429. Cloudflare l’utilise déjà en interne et prévoit d’en donner accès à ses clients ultérieurement.
Rôle de l’image : couverture — l’idée centrale
Section : 
Sujet visuel : Illustration éditoriale d’un écran de surveillance de serveur web montrant clairement un événement de limitation de débit HTTP 429 à côté d’un imprimé
© jsonscraper · illustration générée par IA

L’annonce de Cloudflare indique que des manquements répétés aux préférences du site peuvent faire baisser le niveau de confiance accordé à un bot, tandis qu’un respect constant des règles peut l’augmenter. Le système replace les manquements isolés dans leur contexte : Cloudflare précise qu’il évalue des tendances de comportement durables plutôt que des incidents ponctuels.

Comment les règles du site sont prises en compte

Le fichier robots.txt constitue l’un des signaux exprimant les préférences du propriétaire d’un site : le système compare le trafic observé du bot à ce fichier. Une réponse HTTP 429 (« Trop de requêtes ») indique au client qu’il doit réduire la fréquence de ses demandes ; Cloudflare vérifie si le bot ralentit, suspend ses requêtes ou continue à les envoyer au même rythme.

Pour les opérateurs de sites, les mesures pratiques consistent à maintenir à jour robots.txt, à définir des limites de fréquence adaptées et à examiner les journaux pour voir comment les clients se comportent après une réponse HTTP 429. Ces mesures aident à contrôler le trafic, que le site utilise ou non les outils de Cloudflare.

Ce qui est disponible actuellement

Cloudflare indique qu’elle utilise déjà le système en interne pour évaluer le respect des préférences applicables aux Verified Bots. La prochaine étape consistera à le proposer aux clients, qui pourront alors choisir un seuil de confiance à utiliser pour déterminer comment traiter le trafic des Verified Bots. L’entreprise prévoit également de publier les évaluations sur Cloudflare Radar et d’élargir l’ensemble des signaux pris en compte.

L’annonce décrit donc une nouvelle étape du contrôle, et non un paramètre déjà accessible à tous les clients. Pour les opérateurs de sites, le changement important concerne le principe d’évaluation : l’identité vérifiée du bot sera complétée par l’observation de son respect des règles publiées et de sa réaction aux limitations de requêtes.

People

No people listed for this article yet.

Keep readingGoogle financera un réseau de 560 stations météo scolaires pour les prévisions par IA en Irlande
Read the next article

Transformez vos lectures en intégration fonctionnelle

Explorez les API de données sociales de jsonscraper, testez des requêtes et créez votre prochain workflow.

Explorer les API