Robots.txt-Generator
Erstelle eine einfache robots.txt-Datei mit Allow-, Disallow- und Sitemap-Regeln.
User-agent: *
Allow: /
Disallow: /admin
Disallow: /cuenta
Sitemap: https://ejemplo.com/sitemap.xmlWie es funktioniert
Konfiguriere den User-Agent, füge erlaubte oder blockierte Pfade hinzu und optional die URL deiner Sitemap. Das Tool generiert den Inhalt für robots.txt.
Häufig gestellte Fragen
Verhindert robots.txt, dass eine URL bei Google erscheint?
Nicht unbedingt. robots.txt steuert das Crawling, ist aber keine Garantie für die Deindexierung.
Wo wird die robots.txt platziert?
Normalerweise wird sie im Stammverzeichnis der Domain veröffentlicht, zum Beispiel https://ejemplo.com/robots.txt.