Robots.txt Generator

Erstellen Sie eine robots.txt mit Erlaubnis-/Verbotsregeln und Ihrer Sitemap.

Über das Werkzeug

Professioneller robots.txt-Generator für Ihre Website mit einfacher Oberfläche, ohne Syntaxkenntnisse. Wählen Sie, welche Bots (Googlebot, Bingbot, alle) welche Pfade crawlen dürfen, definieren Sie Sitemap und Crawl-delay. Erstellt eine Datei zum Kopieren ins Website-Root (ihredomain.de/robots.txt). Ideal für SEO, Webmaster und Entwickler.

Häufige Fragen

Wozu?

Sagt Suchmaschinen, was gecrawlt werden darf.

Verhindert Indexierung?

Nicht ganz; nutzen Sie noindex.

Wo hochladen?

Im Root: ihredomain.de/robots.txt.

Mehrere Sitemaps?

Ja.

Versteht Google alles?

Disallow, Allow, Sitemap ja; Crawl-delay nein.