Wir lesen Ihre Website so, wie Crawler es tun, aus unserem eigenen Netz, und jeder Bericht sagt genau, was angefragt wurde und was zurückkam. Wer das betreibt · Pressemappe · hello@crawlcheck.io
Wie wir messen, und unsere eigenen Maschinendateien
CrawlCheck ruft jede Website unter eigenem Namen ab. Seine Tests mit Crawler-Identitäten senden benannte User-Agent-Strings aus dem eigenen Netzwerk, nie aus dem veröffentlichten Bereich eines Betreibers, sodass eine Website, die Crawler verifiziert, sie unterscheiden kann; jeder Bericht sagt das. Die Ergebnisse spiegeln wider, was ein anonymer Nicht-Browser-Client erhält. Was wir erfassen und wie Sie widersprechen · wie jeder Bericht mit Zeitstempel versehen wird · wer dahintersteht · Pressemappe · hello@crawlcheck.io.
Zweiter Blickwinkel: Die Browsererweiterung misst, was Crawler von Ihrer eigenen Adresse aus und nach der Ausführung Ihres JavaScripts erhalten — die Hälfte, die dieser Server nicht sehen kann. Ab 1.0.0 sendet sie die Domain, nach der Sie fragen, auf einen Klick, und anonyme Nutzungszahlen, die Sie abschalten können; ab 1.0.3 schlägt sie zusätzlich die Note der Website im aktuellen Tab über deren Hostnamen nach (nie die URL oder den Seiteninhalt), was sich über einen Schalter in der Fußzeile abstellen lässt. Frühere Versionen senden nichts.
Unsere eigene Maschinenebene für das agentische Web: llms.txt · llms-full.txt · agents.md · SKILL.md · entitymap.json · Media-Kit · MCP-Server-Karte · API-Katalog · OpenAPI · robots.txt · sitemap.xml · security.txt — jede davon in der robots.txt genannt, genau das, was wir bei Ihnen prüfen.