Nous lisons votre site comme le font les robots, depuis notre propre réseau, et chaque rapport dit exactement ce qui a été demandé et ce qui est revenu. Qui gère ce site · Dossier de presse · hello@crawlcheck.io
Comment nous mesurons, et nos propres fichiers machine
CrawlCheck lit chaque site sous sa propre identité. Ses tests d’identité de robots envoient des user-agents nommés depuis son propre réseau, jamais depuis la plage publiée d’un opérateur, pour qu’un site qui vérifie les robots puisse les distinguer ; chaque rapport le précise. Les résultats reflètent ce que reçoit un client anonyme qui n’est pas un navigateur. Ce que nous collectons et comment refuser · comment chaque rapport est horodaté · qui est derrière · kit presse · hello@crawlcheck.io.
Second point de vue : l’extension de navigateur mesure ce que reçoivent les robots depuis votre propre adresse et après l’exécution de votre JavaScript — la moitié que ce serveur ne peut pas voir. Depuis la 1.0.0, elle envoie le domaine demandé, sur un seul bouton, et des statistiques d’usage anonymes désactivables ; depuis la 1.0.3, elle consulte aussi la note du site de l’onglet courant par son nom d’hôte (jamais l’URL ni le contenu de la page), ce qu’un interrupteur en pied de page désactive. Les versions antérieures n’envoient rien.
Notre propre couche machine pour le web agentique : llms.txt · llms-full.txt · agents.md · SKILL.md · entitymap.json · kit média · carte de serveur MCP · catalogue d’API · OpenAPI · robots.txt · sitemap.xml · security.txt — chacun nommé dans robots.txt, exactement ce que nous vérifions sur le vôtre.