robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

De tool werkt direct in de browser en is geschikt voor snelle controles zonder software te installeren.
Invoer kan meteen worden gewist en opnieuw berekend, handig voor kleine herhaalde taken.
Gebruik de fullscreenmodus wanneer u meer ruimte nodig hebt voor lange tekst, gestructureerde data of grote resultaten.
Kopieerknoppen helpen om resultaten direct te gebruiken in code, documenten of supportgesprekken.
De meeste bewerkingen zijn deterministisch: dezelfde invoer en opties leveren hetzelfde resultaat op.
Gebruik voor gevoelige inhoud bij voorkeur lokale browsertools en controleer het resultaat voordat u het deelt.