Andere Crawler holen das Web für Agenten. CrawlCheck verifiziert es.
CrawlCheck ist die Verifikationsschicht für das agentische Web. Es misst, was eine Website tatsächlich ausliefert — abgerufen als GPTBot, ClaudeBot, PerplexityBot, Googlebot und acht weitere Crawler-Identitäten, dazu ihre Maschinendateien, Crawl-Richtlinie, erklärte Rechte und Fähigkeiten — entscheidet Befunde nach veröffentlichten Regeln und signiert die Antwort, damit ein Agent sie offline prüfen kann, bevor er liest, zitiert, sich verbindet oder handelt. Website-Betreiber erhalten dieselbe Messung als kostenloses A–F-Audit mit jedem benannten Mangel.
- Gemessen — 15 Crawler-Identitäten, 5 Maschinendateien auf beiden Hosts, jedes Byte gehasht und täglich in Bitcoin versiegelt.
- Signiert — Ed25519 über jede Antwort, veröffentlichte Schlüssel, ein Skript prüft alles offline.
- Unabhängig — 6 Beobachtungsnetze, ein öffentliches Regelwerk, ein Einspruchsregister. Bezahlen ändert nie eine Messung.
Sie bauen einen Agenten? Eine signierte Entscheidung pro Aktion · Resolve-Protokoll · npm- und PyPI-SDKs
Ed25519 · offline prüfbarSignierte Antwort öffnen →200,554
gemessene Websites
177
signierte Entscheidungen, letzte 30 Tage
117,395
echte Crawler-Besuche protokolliert
0
Zahlen, die eine Zahlung ändern kann
Gebaut und betrieben von einer Person in Denver, zuerst auf den Kundenseiten, die es misst — die Demo ist ein echter, unretuschierter Datensatz. Der Scan ist immer kostenlos. Einmal beheben für $749, oder ein Protokoll führen ab $29/Monat →
Was ein Agent zurückbekommt.
Eine Website wird beobachtet und ihre Erklärungen gelesen; veröffentlichte Regeln entscheiden die Befunde; die Entscheidung je Aktion wird in eine Quittung signiert. Nichts wird geraten: ein ungemessener Abschnitt sagt es.
Die Messung
Was 14 Crawler-Identitäten erhielten von denverpost.com
Eine echte Website, vor 4 Tagen gescannt — 1 Identität wurde abgewiesen, 10 erhielten andere Bytes als der Browser, jede davon mit denselben 2,061 Wörtern. Den vollständigen Datensatz öffnen oder scannen Sie oben Ihre eigene Website.
Vier Wege hinein.
Agenten-Entwickler
Fragen, bevor Ihr Agent handelt.
Eine signierte Entscheidung pro Aktion: lesen, zitieren, verbinden oder abwickeln. Gebildet aus dem, was die Website erklärt, was ihr wirklich ausgeliefert wurde, ihren Befunden und Ihrer eigenen Richtlinie, die sie nur strenger machen kann. Typisierte SDKs auf npm und PyPI.
Schnellstart · Resolve · SDKs
Developer
Die Belege im Code nutzen.
Maschinendatensätze mit den Bytes hinter jedem Befund, OpenTelemetry- und PROV-Exporte, Batch-Scans, Webhooks und ein CI-Gate, ab 2,000 Scans im Monat.
Agency
Kunden überwachen und die Arbeit belegen.
40 Domains auf einem Schlüssel, kundensichere Berichte, signierte Änderungsquittungen, die ein Kunde prüfen kann, und die API: 5,000 Scans im Monat.
Website-Inhaber
Wissen, was Agenten bekommen, und es beheben.
Kostenlos scannen. Wir setzen die Fix-Liste für $749 um und prüfen sie mit einem erneuten Scan; die Überwachung hält es ab $29 im Monat behoben, mit einem Zertifikat, das am Tag einer schlechten Messung erlischt.
Prüfen · Beheben · Überwachen
Der Zustand des agentischen Webs, jeden Tag.
Dieselben tausend Websites, täglich vom selben Standpunkt gemessen. Ablehnungen gelten als „von hier abgelehnt“, nie als „blockiert“ — die Adressen der echten Crawler sind nicht unsere.
Jede Zeile nennt ihren eigenen Nenner. Jede Zahl, jeder Lauf und die Datensätze, aus denen sie gezählt werden →
Die Schichten, auf die sich ein Agent verlassen kann.
Jede Kachel ist eine Live-Zählung oder ein veröffentlichtes Artefakt, jeweils mit der Seite, auf der Sie es prüfen können.
Was es misst, und was es nicht behauptet.
Methode
Jede Regel ist veröffentlicht.
Was jeder Befund bedeutet, wie Sie ihn beheben, und die eine Grenze: Crawler-Identitäten werden von unserer Adresse aus getestet, nicht von der eines Betreibers.
Datenschutz
Was ein Scan sendet und aufbewahrt.
About 30 read-only requests. Reports are kept: 90 days in the fast store, then from the sealed archive; any domain can opt out without an account.
Offener Kern
Der Leser ist Open Source.
Der robots.txt-Leser steht unter MIT-Lizenz und wird gegen die Produktion getestet.
Grenzen
Belege, keine Zitierbehauptung.
Ein Scan belegt, was Ihr Server gesendet hat. Er behauptet nie, dass eine Antwortmaschine Sie zitiert hat, und Bezahlen ändert nie eine Punktzahl.
Beginnen Sie mit einem kostenlosen Scan, oder fragen Sie, bevor Ihr Agent handelt.
Ein Website-Betreiber bekommt die Note und jeden benannten Befund in einer Minute, ohne Installation. Ein Agenten-Entwickler bekommt eine signierte Entscheidung pro Aktion und die Belege dahinter, offline prüfbar. Beides kostet nichts, und Ad-hoc-Scans werden nie namentlich veröffentlicht.
