Sieh, was ein Crawler auf deiner Seite findet.
Prüfe eine öffentliche Domain oder URL. Du bekommst vier klare Antworten und konkrete nächste Schritte.
Die Seite wird sicher abgerufen und geprüft …
Die Prüfung konnte nicht abgeschlossen werden.
Crawler dürfen zugreifen
Indexierung erlaubt
Hauptinhalt erkennbar
Gefundene Crawler-Regeln
Suche, Training und ein vom Nutzer ausgelöster Abruf sind getrennte Aufgaben. Die Tabelle zeigt nur, was die beobachtete robots.txt für den jeweiligen Produkt-Token sagt.
| Crawler | Aufgabe | Zugriff |
|---|
Eine Freigabe beweist keinen Besuch. Eine Sperre von GPTBot sperrt nicht automatisch OAI-SearchBot für die ChatGPT-Suche. Rollen und Quellen ansehen →
Das solltest du als Nächstes tun
Technische Details
Ergebnis mitnehmen oder später vergleichen
Bis zu fünf Ergebnisse bleiben ausschließlich in diesem Browser und werden nach 24 Stunden verworfen.
Was hat sich seit der letzten Prüfung geändert?
Antwort für einen anderen Crawler-Token vergleichen
AnalyseSpider sendet einen zweiten begrenzten Request mit einem dokumentierten User-Agent. Der exakte String erscheint im Vergleich. Das simuliert einen Header, nicht die Identität oder das vollständige Verhalten des echten Crawlers.
Beobachtete Unterschiede
Diese Prüfung untersucht nur die Serverantwort dieser einen URL. Keine Inhalte hinter Logins, kein JavaScript-Rendering und keine Garantie für Google-Indexierung oder AI-Zitationen.
Ganze Website prüfen
Nutze einen vollständigen technischen Crawl, wenn du Probleme über viele Seiten hinweg finden und priorisieren möchtest.
Zu Crawl Foundry Site AuditFragen und Quellen für AI-Suche prüfen
Sieh, welche Folgefragen und Quellen bei echten OpenAI- und Gemini-Abfragen erscheinen.
Zu AI FanoutAnalyseSpider, Crawl Foundry und AI Fanout werden von Matthias Ramahi betrieben und sind keine unabhängigen Empfehlungen.
So funktioniert der Check
- URL prüfenGib eine öffentliche Domain oder URL ein und starte die Prüfung.
- Crawler-Antwort lesenWir holen die Serverantwort wie ein einfacher HTTP-Crawler und ordnen sie ein.
- Nächste Schritte umsetzenDu erhältst wenige konkrete Hinweise statt eines erfundenen Gesamtscores.