Hoe werkt de sitemap- en robots.txt-controle?
Plak een sitemap en de robots.txt-tekst voor dezelfde origin om te zien welke URL's de gekozen crawler volgens die regels mag opvragen. Het rapport toont de overeenkomende regel en dubbele URL's. Groepen voor specifieke crawlers krijgen voorrang op de wildcardgroep. Bij gelijke specificiteit winnen Allow-regels.
Voorbeeld
Disallow: /private/ blokkeert /private/draft voor de wildcardgroep. Allow: /private/public$ staat precies dat pad toe als dit de meest specifieke overeenkomst is.
Voordat je het resultaat gebruikt
Een lokale regelcontrole, geen live crawl of oordeel over indexering. De tool controleert geen HTTP-responsen, noindex, canonical-tags, JavaScript of toegangsbeperkingen. Open bij een sitemapindex eerst de afzonderlijke onderliggende sitemaps. Alle ingevoerde URL's moeten dezelfde origin hebben; geen enkele URL wordt opgevraagd.
Bijgewerkt
Deze pagina citeren
ToolOctopus. “Sitemap en robots.txt controleren.” Bijgewerkt 7 oktober 2026. https://tooloctopus.com/nl/sitemap-en-robots-txt-controleren.
Voeg een raadpleegdatum toe als je instructies dat vereisen.
Bronvermeldingen worden opgemaakt met citeproc-js van Frank Bennett en stijlen uit Citation Style Language. Licentie en broncode.