Sieh, was Crawler auf deiner Website sehen.

Prüfe Weiterleitungen, robots.txt, HTTP-Antworten und Server-Logs. Kostenlos, ohne Anmeldung und ohne deine Eingaben hochzuladen.

Kostenloses Tool wählen Crawling einfach erklärt

Beispiel: eine URL prüfenKeine Live-Abfrage

Status: 200 OKDie Seite antwortet erfolgreich.
Robots: index, followDie Seite erlaubt Indexierung.
Canonical: Verweist auf sich selbstKein Konflikt in diesem Beispiel.
Redirect: Keine WeiterleitungDie URL bleibt gleich.

Was möchtest du prüfen?

Warum wird meine Seite nicht indexiert?Prüfe Statuscode, robots-Angaben und Canonical.Wohin führt diese Weiterleitung?Baue die einzelnen Redirect-Schritte nach.Darf dieser Crawler meine Seite aufrufen?Teste eine robots.txt-Regel für einen Bot.Was zeigen meine Server-Logs?Finde Statuscodes, Pfade und angegebene Bots.

Zwei Bereiche. Ein klares Ziel.

Nutze ein Tool, wenn du schon Daten hast. Lies eine Erklärung, wenn du erst verstehen möchtest, was ein Ergebnis bedeutet.

Tools

Fünf kleine Werkzeuge für Logs, HTTP-Antworten, Redirects, robots.txt und IP-Adressen.

Tools öffnen

Wissen

Kurze Antworten auf echte Fragen zu Crawling, Indexierung, Redirects und Server-Logs.

Wissen öffnen

Crawler sind nicht alle gleich.

Googlebot, Bingbot und AI-Crawler haben unterschiedliche Aufgaben. Wir zeigen, was der Betreiber veröffentlicht, wie du einen Bot prüfen kannst und wann die Angabe zuletzt kontrolliert wurde.

Crawler vergleichen

Warum heißt die Seite AnalyseSpider?

Die Domain wurde früher für Log-Analyse und IP-Werkzeuge genutzt. Die heutige Website ist eine neue Entwicklung unter neuer Eigentümerschaft. Alte Software, Texte, Daten und Kunden wurden nicht übernommen.

Mehr über die neue Eigentümerschaft