Cómo medimos, y nuestros propios archivos para máquinas
CrawlCheck visita cada sitio con su propia identidad. Sus pruebas de identidad de rastreadores envían user-agents con nombre desde su propia red, nunca desde el rango publicado de un operador, para que un sitio que verifica rastreadores pueda distinguirlos; cada informe lo indica. Los resultados reflejan lo que recibe un cliente anónimo que no es un navegador. Qué recopilamos y cómo excluirte · cómo se sella en el tiempo cada informe · quién está detrás · kit de prensa · hello@crawlcheck.io.
Segundo punto de vista: la extensión del navegador mide lo que reciben los rastreadores desde tu propia dirección y después de ejecutarse tu JavaScript: la mitad que este servidor no puede ver. Desde la 1.0.0 envía el dominio que consultas, con un botón, y recuentos de uso anónimos que puedes desactivar; desde la 1.0.3 un interruptor del pie de página desactiva la consulta del nombre de host para la nota del icono; desde la 1.0.4 un interruptor de uso compartido, activado por defecto, envía una lectura firmada de los dos puntos de vista (estado, tamaño, palabras y un hash por identidad; nunca el texto de la página); desde la 1.0.16 las fichas envían los nombres de host de los resultados y de las citas de IA mientras los interruptores de fichas y de nota están activados; desde la 1.0.17 un interruptor de lecturas, activado por defecto, envía una lectura de página firmada al día (números, nombre de host y dirección de la página sin la consulta; nunca en incógnito; como máximo 40 al día), y solo mientras los interruptores de uso compartido y de nota también están activados. Las versiones anteriores no envían nada.
Nuestra propia capa para máquinas en la web agéntica: llms.txt · llms-full.txt · agents.md · SKILL.md · entitymap.json · kit de prensa · tarjeta del servidor MCP · catálogo de API · OpenAPI · robots.txt · sitemap.xml · security.txt, cada uno nombrado en robots.txt, justo lo que comprobamos en el tuyo.