BOT · Accès des robots IA

Consigne adressée à un ancien robot d’Anthropic, ClaudeBot non mentionné

KZG-BOT-021 geopack@2026.08.1

Ce que la règle vérifie

Voici ce que le rapport écrit quand la règle se déclenche. Les termes entre accolades sont remplacés par les valeurs relevées sur le site audité.

Pour le dirigeant

Votre robots.txt s’adresse à un ancien nom de robot d’Anthropic, que l’éditeur ne décrit plus dans sa documentation, et ne mentionne pas ClaudeBot, le robot qu’il décrit aujourd’hui. La consigne que vous avez écrite, qu’elle autorise ou qu’elle interdise, ne vise donc pas le robot actuel.

Pour la personne qui corrige

robots.txt : groupe(s) « User-agent: {retiredAgents} » présent(s), aucun groupe « User-agent: ClaudeBot ».

Ce que le constat ne dit pas

Anthropic documente aujourd’hui trois robots (ClaudeBot, Claude-User, Claude-SearchBot) et ne liste plus « anthropic-ai » ni « Claude-Web » ; nous n’avons pas de source de l’éditeur qui date leur retrait. ClaudeBot reste soumis au groupe « * » s’il existe : ce constat ne dit pas que ClaudeBot est autorisé ou bloqué chez vous, seulement que votre consigne nominative ne le vise pas.

Le correctif

Ajoutez un groupe pour le robot actuel, avec la règle que vous aviez prévue pour l’ancien nom : « User-agent: ClaudeBot » suivi de « Allow: / » ou de « Disallow: / » selon votre choix. L’ancien groupe peut rester en place.

Corriger ce point améliore la lisibilité du site pour les moteurs. Cela ne garantit pas qu’un moteur citera l’entreprise : ce choix lui appartient.

Niveau de preuve

Observé. Le comportement se constate — dans des relevés, des analyses de journaux publiées — mais aucun fournisseur ne s’y engage par écrit. Il peut changer sans préavis.

Références