robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Das Tool läuft direkt im Browser und ist für schnelle Prüfungen ohne Softwareinstallation geeignet.
Die Eingabe kann sofort geleert und neu berechnet werden, was bei wiederkehrenden kleinen Aufgaben praktisch ist.
Nutzen Sie den Vollbildmodus, wenn mehr Platz für langen Text, strukturierte Daten oder große Ergebnisse nötig ist.
Kopierbuttons helfen, Ergebnisse direkt in Code, Dokumente oder Support-Chats zu übernehmen.
Die meisten Operationen sind deterministisch: gleiche Eingaben und Einstellungen liefern das gleiche Ergebnis.
Bei sensiblen Inhalten sind lokale Browser-Tools praktisch, prüfen Sie das Ergebnis dennoch vor dem Teilen.