Lemos o seu site como os rastreadores fazem, a partir da nossa própria rede, e cada relatório diz exatamente o que foi pedido e o que voltou. Quem gere isto · Kit de imprensa · hello@crawlcheck.io
Como medimos, e os nossos próprios ficheiros para máquinas
O CrawlCheck visita cada site com a própria identidade. Seus testes de identidade de rastreador enviam user-agents nomeados a partir da própria rede, nunca da faixa publicada de um operador, para que um site que verifica rastreadores consiga distingui-los; todo relatório diz isso. Os resultados refletem o que um cliente anônimo que não é navegador recebe. O que coletamos e como sair · como cada relatório recebe carimbo de tempo · quem está por trás · kit de imprensa · hello@crawlcheck.io.
Segundo ponto de vista: a extensão do navegador mede o que os rastreadores recebem a partir do seu próprio endereço e depois que o seu JavaScript roda — a metade que este servidor não consegue ver. A partir da 1.0.0, ela envia o domínio que você consulta, com um botão, e contagens de uso anônimas que você pode desligar; a partir da 1.0.3, ela também consulta a nota do site da aba atual pelo nome do host (nunca a URL nem o conteúdo da página), o que um botão no rodapé desliga. Versões anteriores não enviam nada.
Nossa própria camada para máquinas na web agêntica: llms.txt · llms-full.txt · agents.md · SKILL.md · entitymap.json · kit de mídia · cartão do servidor MCP · catálogo de API · OpenAPI · robots.txt · sitemap.xml · security.txt — cada um nomeado no robots.txt, exatamente o que verificamos no seu.