User-agent: * Allow: / Disallow: /admin/ Sitemap: https://www.gratistool.nl/sitemap.xml
Robots.txt Generator
Vul je website-URL in en genereer een eenvoudige robots.txt. Handig voor nieuwe websites die zoekmachines toegang willen geven en een sitemap willen doorgeven.
Laatst bijgewerkt: mei 2026
Advertentie
Advertentie
Wat hoort er in een robots.txt?
Een robots.txt-bestand staat in de root van je website, bijvoorbeeld /robots.txt. Het bestand geeft crawlers aanwijzingen over welke paden ze wel of niet mogen crawlen en waar je sitemap staat.
Voor de meeste kleine websites is een simpele configuratie genoeg: alles toestaan en de sitemap-URL vermelden.
Belangrijk verschil: crawlen vs indexeren
Robots.txt blokkeert crawling, maar is geen betrouwbare manier om indexatie te voorkomen. Een URL kan nog steeds in Google verschijnen als andere sites ernaar linken. Gebruik voor echte de-indexatie een noindex meta tag op de pagina zelf.
Blokkeer geen CSS- of JavaScript-bestanden die Google nodig heeft om je pagina goed te renderen.
Veelgestelde vragen
Wat doet robots.txt?▼
Robots.txt geeft crawlers aanwijzingen over welke delen van je site ze mogen bezoeken.
Moet mijn sitemap erin staan?▼
Dat is aan te raden, zodat zoekmachines je sitemap makkelijker vinden.
Blokkeert robots.txt indexatie altijd?▼
Nee, gebruik noindex voor pagina's die echt niet geïndexeerd mogen worden.
Gerelateerde tools
SEO & InhoudGoogle SERP Preview ToolBekijk hoe je title tag, URL en meta description eruitzien in Google. Gratis SERP snippet preview voor SEO en hogere CTR.SEO & InhoudMeta Tag GeneratorGenereer SEO meta tags voor je webpagina. Vul de titel en beschrijving in en kopieer de HTML direct naar je <head>. Gratis online meta tag generator.SEO & InhoudSlug GeneratorZet tekst om naar een URL-vriendelijke slug. Koppeltekens, kleine letters, accenten verwijderd. Ideaal voor blogposts, productnamen en SEO-vriendelijke links.