GlobalKostenlos

Robots.txt erstellen

Crawl-Regeln erzeugen. Robots.txt schützt keine privaten Seiten und entfernt keine indexierten URLs.

Deine Eingaben bleiben in diesem Tab. Wir erhalten weder Dateien noch Texte oder Rechenwerte.

Eingabe

Dein Ergebnis

Dein Ergebnis erscheint hier.

So verwendest du dieses Tool

  1. Werte eingeben oder lokale Datei wählen. Beispieldaten durch eigene ersetzen.
  2. Optionen, Einheiten und Annahmen prüfen, dann Tool ausführen.
  3. Ergebnis vor Kopieren oder Download prüfen. Wichtige Originaldateien aufbewahren.

Methode und Annahmen

Crawl-Regeln erzeugen. Robots.txt schützt keine privaten Seiten und entfernt keine indexierten URLs.

User-agent + Disallow + Sitemap

Rechenbeispiel

User-agent: *
Disallow: /admin/
Sitemap: https://example.com/sitemap.xml

Grenzen und Hinweise

Ergebnis hängt von Eingaben und Browser ab. Original behalten. Große Dateien können den Gerätespeicher überfordern.

Inhalt aktualisiert:

Datenschutz & Kostenlos

Werden meine Eingaben gespeichert?

Deine Eingaben bleiben in diesem Tab. Wir erhalten weder Dateien noch Texte oder Rechenwerte.

Ist dieses Tool kostenlos?

Ja. Keine Anmeldung oder Zahlung nötig.

Verarbeitung in deinem Browser

Weitere nützliche Tools

JSON formatieren und prüfen

JSON lokal prüfen, formatieren oder minimieren. Kein Versand ungültiger Daten.

Entwicklung und SEO

CSV in JSON umwandeln

CSV mit Kopfzeile, zitierten Trennzeichen und Umbrüchen in JSON umwandeln.

Entwicklung und SEO

JSON in CSV umwandeln

Flaches Objektarray in CSV. Formelähnliche Zeichenfolgen erhalten einen Schutzpräfix.

Entwicklung und SEO