# Vérificateur d’accès IA > Votre site est-il prêt pour l’IA et la recherche ? Ce que robots.txt indique aux robots de recherche et d’IA, et ce que votre site propose aux agents IA. Vérifiez l’accès des IA et moteurs : robots.txt pour GPTBot, ClaudeBot et Googlebot, llms.txt, plan du site, JSON-LD et marqueurs WebMCP. - Page: https://how.box/fr/ai-readiness/ - Uses our server; server limits: 10 requests/minute per visitor, 150 requests/day per visitor, 40 page/minute per visitor, 10 requests/minute per target, 10 requests/second per global. - License: HowToolbox's own text and data (titles, explanations, FAQs, tool descriptions and schemas, this file) are CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/); AI training and answers are welcome. Attribute "HowToolbox (how.box)" with a link to the page used. Third-party data keeps its own terms; the name and logo are not licensed. Publisher: HowToolbox, contact@how.box. Terms: https://how.box/fr/about/terms/ ## Inputs Answer link: https://how.box/fr/ai-readiness/?h={h} - `h` (text): Public site (host name) to check; the check runs when the page opens. Example: `example.com`. Example answer: https://how.box/fr/ai-readiness/?h=example.com The page computes the answer in the browser: read results from the agent tools below, not from the page HTML. ## Agent tools - `ai_readiness_check_site`: Checks how ready a public website is for search engines, AI crawlers and agents, from four public files read once by our server: robots.txt, llms.txt, one sitemap and the home page. - Page only: runs on this page (WebMCP), not over MCP. ## How it works Les moteurs de recherche et les systèmes d’IA lisent quelques fichiers publics avant d’utiliser un site. robots.txt indique quels robots peuvent récupérer quels chemins, et peut contenir une ligne Content-Signal précisant si le contenu peut servir à la recherche, aux réponses IA ou à l’entraînement IA. llms.txt est un court guide Markdown du site pour les modèles de langage. Un sitemap liste les pages, et le JSON-LD de l’accueil décrit le site aux machines avec les termes schema.org. WebMCP permet à une page de proposer des outils à un agent IA dans le navigateur. Ces quatre derniers éléments sont facultatifs ; ensemble, ils facilitent la découverte et l’utilisation du site. Pour chaque robot connu, l’outil applique la RFC 9309, norme de robots.txt : le robot suit le groupe qui le nomme, sinon le groupe *, et la règle correspondante la plus longue l’emporte, avec priorité à Allow en cas d’égalité. Seule la page d’accueil, « / », est évaluée. Exemple : si robots.txt contient « User-agent: GPTBot » avec « Disallow: / » et un groupe « User-agent: * » autorisant tout, GPTBot est bloqué par ses propres règles et tous les autres robots sont autorisés. L’absence de robots.txt signifie aucune limite ; une erreur serveur empêchant sa lecture peut freiner les robots et est donc signalée. Sources : RFC 9309 ; politique Content Signals ; llmstxt.org ; sitemaps.org ; schema.org. Le contrôle lit une fois quatre fichiers publics depuis notre serveur et ne juge pas s’il faut bloquer un robot d’IA : c’est votre choix, et la ligne correspondante est seulement informative. Il ne teste pas les règles d’autres chemins ni les en-têtes comme X-Robots-Tag. Les outils WebMCP enregistrés par script après chargement sont invisibles sans exécuter la page : l’absence de marqueur ne prouve donc pas qu’un site n’en a pas. ## FAQ **Faut-il bloquer les robots d’IA ?** C’est un choix d’entreprise. Bloquer les robots d’entraînement exclut votre contenu de l’entraînement des modèles ; bloquer ceux de recherche IA vous exclut des réponses IA et de leurs liens. L’outil montre seulement ce que dit actuellement votre robots.txt. **robots.txt rend-il le contenu privé ?** Non. C’est une demande respectée par les robots coopératifs, pas un contrôle d’accès. Tout contenu réellement privé nécessite une connexion. **Qu’est-ce qu’une ligne Content-Signal ?** Une ligne facultative de robots.txt, comme Content-Signal: search=yes, ai-input=yes, ai-train=no. Elle précise les usages autorisés du contenu. Certains robots la lisent ; elle ne bloque personne à elle seule. **llms.txt est-il nécessaire ?** C’est une proposition, pas une obligation, et aucun moteur de recherche ne promet de l’utiliser. Sa publication coûte peu et certains outils IA le lisent : il n’est signalé que s’il existe mais est mal formé. **Pourquoi mon sitemap est-il indiqué comme non déclaré dans robots.txt ?** L’outil l’a trouvé à /sitemap.xml, mais robots.txt n’a pas de ligne Sitemap:. L’ajouter permet à tous les robots de le trouver sans deviner. **Pourquoi mes outils WebMCP sont-ils invisibles ?** Les outils WebMCP sont généralement enregistrés par script après chargement. L’outil ne cherche que les marqueurs HTML, comme un formulaire déclaré comme outil. More: [HowToolbox index](https://how.box/llms.txt) · [Agent Skill](https://how.box/skill.md) · [agent terms](https://how.box/fr/about/agents/)