robots.txt-Generator

Eine robots.txt mit Allow-/Disallow-Regeln und Sitemap-Verweis erstellen.

User-Agent Disallow (eine pro Zeile) Allow (eine pro Zeile) Sitemap-URL

Ausgabe

Tageslimit für dieses Tool erreicht. Mit Konto oder Premium gibt es höhere Limits.

So funktioniert's