With the three guides that explain how to read a report: how to read a CrawlCheck report, how to check whether AI crawlers can read your site, and how to measure AI visibility. Each is a check you can run on any domain today.

What is a finding, as opposed to a guide?

A finding is a dated case from a real scan — what was served, what was declared, what differed — with the bytes behind it. A guide is the reusable check that case taught. Findings never name a site before contact has been made.

Are the rates in the guides real?

Yes. The rate printed in a guide is the share of scans in the public dataset that carried that finding, read live from the same counts the data pages publish.

Is the glossary the same vocabulary the product uses?

Yes. A term is defined once; the report, the API and the specifications use that definition and link back to it.

Apprendre · guides, constats, glossaire

Comment vérifier un site pour le web agentique ?

En une phrase

La bibliothèque CrawlCheck, ce sont les guides, les constats et le glossaire derrière le scanner : chaque guide vérifie une chose sur n’importe quel site et indique à quelle fréquence elle échoue sur l’ensemble des analyses, chaque constat est un cas daté issu d’une mesure réelle, et chaque terme du glossaire est défini une fois et lié depuis le rapport qui le mesure.

64 guides, 93 constats mesurés et un glossaire de 751 termes — chacun écrit à partir d’une mesure, avec la fréquence à laquelle la chose se produit sur l’ensemble des analyses.

Rien ici n’est un conseil issu d’un sondage. Un guide vous dit comment vérifier une chose sur n’importe quel site et ce que la vérification trouve d’habitude ; un constat est un cas issu d’une analyse réelle avec les octets derrière ; un terme est défini une fois et lié depuis le rapport qui le mesure.

Payer ne change jamais une mesure. Le recueil de règles · Les robots · Comment fonctionne une analyse

Réponse signée · un site public, mesuré chaque jour · observé il y a 12 joursdenverpost.comlireavertirciteravertirconnecterrien de déclarétransigerrequiert un humain8 des 9 identités de crawlers IA ont reçu la page ; robots.txt autorise 73 des 114 agents testésPolitique de crawldéclarée · 73 des 114 agents autorisésLivraisonobservée · 14 identités, 1 refusée(s)Fichiers machineobservés · 5 lus, contenus hachésConstats8 ouverts · 4 sérieuxEd25519 · vérifiable hors ligneOuvrir la réponse signée →

Trois chemins vers le bas

Guides. Constats. Glossaire.

Guides

Comment vérifier une chose.

Chaque guide est une vérification : quoi récupérer, quoi chercher, ce que cela signifie, et à quelle fréquence cela échoue sur l’ensemble des analyses. Commencez par les trois qui expliquent comment lire un rapport.

Tous les guides · Commencer ici

Constats

Ce que de vraies analyses ont trouvé.

Des études de cas datées issues du jeu de données public : un robots.txt illisible, un nom de robot que Google dit ne jamais envoyer, une page qui a donné une seule identité à deux entreprises.

Tous les constats · Les données derrière

Glossaire

Chaque terme, défini une fois.

751 termes de la couche machine, chacun avec la page qui le mesure. Les définitions sont celles qu’utilisent le rapport et l’API.

Le glossaire · Web agentique · Règles

La bibliothèque, comptée

Chaque nombre ici est lu depuis le manifeste qui le publie.

64guidesComment vérifier une chose, avec la fréquence à laquelle elle échoue sur l’ensemble des analyses.Guides →93constats mesurésÉtudes de cas issues d’analyses réelles : ce qui a été servi, ce qui a été déclaré, ce qui différait.Constats →751termes du glossaireChaque terme qu’utilise le produit, défini une fois et lié depuis l’endroit où il est mesuré.Glossaire →86règles publiéesCe que chaque constat teste, sa gravité et comment le corriger. Calculé depuis le service en production.Le recueil de règles →15identités de robotsQui parcourt le web pour les agents et les moteurs de réponse, et comment chacun est testé.Les robots →

Commencer ici

Trois guides qui expliquent le rapport.

Par thème

Ce que couvrent les guides.

Sécurité et e-mail — En-têtes et enregistrements DNS qu’un robot peut lire : HSTS, CSP, DMARC, SPF, DKIM. (3)
Robots d’IA et accès — Qui récupère les pages, s’ils peuvent entrer, et s’ils sont bien qui ils disent être. (18)
Visibilité IA et moteurs de réponse — Ce qui peut réellement être mesuré sur un site dans une réponse générée. (8)
Entités, schéma et présence locale — Déclarer qui vous êtes pour qu’un résolveur n’ait pas à deviner : JSON-LD, NAP, annuaires. (6)
Fichiers machine et diffusion — robots.txt, llms.txt, sitemaps, canoniques, caches, codes d’état. (12)
Qualité du site, liens et accessibilité — Ce dont un lecteur, un lecteur d’écran et un vérificateur de liens ont chacun besoin d’une page. (17)

Derniers constats

Mesuré ce mois-ci.

Tous les constats →

Questions sur cette page

QPar où commencer ?

Par les trois guides qui expliquent comment lire un rapport : comment lire un rapport CrawlCheck, comment vérifier si les robots d’IA peuvent lire votre site, et comment mesurer la visibilité IA. Chacun est une vérification que vous pouvez lancer dès aujourd’hui sur n’importe quel domaine.

QQu’est-ce qu’un constat, par rapport à un guide ?

Un constat est un cas daté issu d’une analyse réelle — ce qui a été servi, ce qui a été déclaré, ce qui différait — avec les octets derrière. Un guide est la vérification réutilisable que ce cas a enseignée. Les constats ne nomment jamais un site avant qu’un contact ait été pris.

QLes taux indiqués dans les guides sont-ils réels ?

Oui. Le taux imprimé dans un guide est la part des analyses du jeu de données public qui portaient ce constat, lue en direct depuis les mêmes comptages que publient les pages de données.

QLe glossaire est-il le même vocabulaire que celui du produit ?

Oui. Un terme est défini une fois ; le rapport, l’API et les spécifications utilisent cette définition et y renvoient.