Gratis verktyg · körs lokalt
Robots.txt-generator
Skapa en korrekt robots.txt på sekunder – inklusive sitemap och AI-crawlare.
Tillåt eller blockera bots
Avmarkerade bots blockeras. Att tillåta AI-crawlare ger synlighet i AI-sökmotorer.
Din robots.txt
Så använder du verktyget
- Ange din domän så fylls sitemap-URL:en i automatiskt.
- Välj vilka bots som ska ha tillåtelse eller blockeras.
- Kopiera den genererade filen och lägg den i din rotkatalog.
En robots.txt berättar för sökmotorer och bots vilka sidor de får besöka. Ett felaktigt blockerande kan ta bort hela sajten från sökresultat.
Vanliga frågor
I roten på din webbplats, alltså adressen /robots.txt.
Det är ett val. Att tillåta dem ger synlighet i AI-sökmotorer; att blockera dem skyddar ditt innehåll från träning. Båda är legitima ställningstaganden.
Sökmotorerna kommer inte att indexera din sajt, och du försvinner från sökresultaten.