Terug naar Hart IT
Robots.txt Generator
Standaard - Alle robots zijn:
Toegestaan (zonder expliciete regel)
Toegestaan (Allow: / toevoegen)
Niet toegestaan (Disallow: /)
Crawl-vertraging:
Geen vertraging
5 seconden
10 seconden
20 seconden
Sitemap:
Geblokkeerde mappen:
Pad relatief aan de root, eindig met "/"
+ Geavanceerde instellingen
Specifieke zoekmachines
Google
Standaard
Toestaan
Niet toestaan
Bing/MSN
Standaard
Toestaan
Niet toestaan
Yahoo
Standaard
Toestaan
Niet toestaan
Baidu
Standaard
Toestaan
Niet toestaan
Maak Robots.txt
Maak en download Robots.txt
Voorbeeld Robots.txt bestand
Kopieer naar klembord