With the three guides that explain how to read a report: how to read a CrawlCheck report, how to check whether AI crawlers can read your site, and how to measure AI visibility. Each is a check you can run on any domain today.

What is a finding, as opposed to a guide?

A finding is a dated case from a real scan — what was served, what was declared, what differed — with the bytes behind it. A guide is the reusable check that case taught. Findings never name a site before contact has been made.

Are the rates in the guides real?

Yes. The rate printed in a guide is the share of scans in the public dataset that carried that finding, read live from the same counts the data pages publish.

Is the glossary the same vocabulary the product uses?

Yes. A term is defined once; the report, the API and the specifications use that definition and link back to it.

Aprender · guias, achados, glossário

Como verificar um site para a web agêntica?

Em uma frase

A biblioteca do CrawlCheck são os guias, os achados e o glossário por trás do scanner: cada guia verifica uma coisa em qualquer site e informa com que frequência ela falha em todos os escaneamentos, cada achado é um caso datado de uma medição real, e cada termo do glossário é definido uma vez e vinculado a partir do relatório que o mede.

64 guias, 93 achados medidos e um glossário de 751 termos — cada um escrito a partir de uma medição, com a frequência com que a coisa ocorre em todos os escaneamentos.

Nada aqui é conselho tirado de pesquisa de opinião. Um guia diz como verificar uma coisa em qualquer site e o que a verificação costuma encontrar; um achado é um caso de um escaneamento real com os bytes por trás; um termo é definido uma vez e vinculado a partir do relatório que o mede.

Pagar nunca muda uma medição. O livro de regras · Os rastreadores · Como funciona um escaneamento

Resposta assinada · um site público, medido diariamente · observado há 12 diasdenverpost.comleralertarcitaralertarconectarnada declaradotransacionarprecisa de um humano8 de 9 identidades de rastreadores de IA receberam a página; o robots.txt permite 73 de 114 agentes testadosPolítica de rastreamentodeclarada · 73 de 114 agentes permitidosEntregaobservada · 14 identidades, 1 recusada(s)Arquivos para máquinasobservados · 5 lidos, conteúdos com hashAchados8 abertos · 4 gravesEd25519 · verificável offlineAbrir a resposta assinada →

Três caminhos para baixo

Guias. Achados. Glossário.

Guias

Como verificar uma coisa.

Cada guia é uma verificação: o que buscar, o que procurar, o que significa e com que frequência falha em todos os escaneamentos. Comece pelos três que explicam como ler um relatório.

Todos os guias · Comece aqui

Achados

O que escaneamentos reais encontraram.

Estudos de caso datados do conjunto de dados público: um robots.txt que não podia ser lido, um nome de rastreador que o Google diz nunca enviar, uma página que deu uma só identidade a duas empresas.

Todos os achados · Os dados por trás

Glossário

Cada termo, definido uma vez.

751 termos da camada para máquinas, cada um com a página que o mede. As definições são as mesmas que o relatório e a API usam.

O glossário · Web agêntica · Regras

A biblioteca, contada

Cada número aqui é lido do manifesto que o publica.

64guiasComo verificar uma coisa, com a frequência com que ela falha em todos os escaneamentos.Guias →93achados medidosEstudos de caso de escaneamentos reais: o que foi servido, o que foi declarado, o que diferiu.Achados →751termos do glossárioCada termo que o produto usa, definido uma vez e vinculado de onde é medido.Glossário →86regras publicadasO que cada achado testa, sua gravidade e como corrigi-lo. Calculado a partir do serviço em produção.O livro de regras →15identidades de rastreadorQuem percorre a web para agentes e mecanismos de respostas, e como cada uma é testada.Os rastreadores →

Comece aqui

Três guias que explicam o relatório.

Por tema

O que os guias cobrem.

Segurança e e-mail — Cabeçalhos e registros DNS que um rastreador consegue ler: HSTS, CSP, DMARC, SPF, DKIM. (3)
Rastreadores de IA e acesso — Quem está buscando, se consegue entrar e se é quem diz ser. (18)
Visibilidade para IA e mecanismos de respostas — O que realmente pode ser medido sobre um site dentro de uma resposta gerada. (8)
Entidades, schema e presença local — Declarar quem você é para que um resolvedor não precise adivinhar: JSON-LD, NAP, listagens. (6)
Arquivos para máquinas e entrega — robots.txt, llms.txt, sitemaps, canônicas, caches, códigos de status. (12)
Qualidade do site, links e acessibilidade — O que um leitor, um leitor de tela e um verificador de links precisam de uma página. (17)

Últimos achados

Medido neste mês.

Todos os achados →

Perguntas sobre esta página

QPor onde começo?

Pelos três guias que explicam como ler um relatório: como ler um relatório do CrawlCheck, como verificar se rastreadores de IA conseguem ler o seu site e como medir a visibilidade para IA. Cada um é uma verificação que você pode rodar hoje em qualquer domínio.

QO que é um achado, em vez de um guia?

Um achado é um caso datado de um escaneamento real — o que foi servido, o que foi declarado, o que diferiu — com os bytes por trás. Um guia é a verificação reutilizável que aquele caso ensinou. Os achados nunca nomeiam um site antes que o contato tenha sido feito.

QAs taxas nos guias são reais?

Sim. A taxa impressa em um guia é a parcela dos escaneamentos do conjunto de dados público que carregavam aquele achado, lida ao vivo das mesmas contagens que as páginas de dados publicam.

QO glossário usa o mesmo vocabulário que o produto?

Sim. Um termo é definido uma vez; o relatório, a API e as especificações usam essa definição e apontam de volta para ela.