Entwicklung · Tool
Robots.txt-Generator
Wählen Sie Crawler-Regeln aus und geben Sie optional eine Sitemap-URL ein, um einen Textentwurf zu erstellen.
Läuft in Ihrem Browser. Kein Upload.
Werte werden lokal in diesem Browser verarbeitet.
Ergebnis
Über dieses Tool
Robots.txt-Generator – einfach erklärt.
Die robots.txt ist eine Anweisung für Crawler, keine Zugriffskontrolle. Verwenden Sie sie nicht zum Schutz privater Dateien; überprüfen Sie Syntax und Pfade vor der Veröffentlichung.
Häufige Fragen
Über Robots.txt-Generator.
Wie verwendet man „Robots.txt-Generator“?
Wählen Sie Crawler-Regeln aus und geben Sie optional eine Sitemap-URL ein, um einen Textentwurf zu erstellen.
Werden meine Daten an einen Server gesendet?
Nein. Die Verarbeitung findet in Ihrem Browser statt. Ihre Daten werden nicht hochgeladen.