← Alle Text-Tools

X-Robots-Tag-Header-Generator

Erstellen Sie X-Robots-Tag-Header und fertige Apache-, Nginx- und PHP-Regeln, die PDFs, Dokumente, Bilder und andere Dateien per noindex ausschließen, die kein robots-Meta-Tag tragen können.

  • Kostenlos
  • Ohne Anmeldung
  • Funktioniert auf jedem Gerät

Über X-Robots-Tag-Header-Generator

Das Robots-Meta-Tag funktioniert nur in HTML, daher kann eine PDF-, Tabellen- oder Bilddatei es nicht nutzen. Der HTTP-Header X-Robots-Tag erledigt dieselbe Aufgabe für jede Datei, weil der Server ihn mit der Antwort sendet. Dieses Tool baut den Headerwert aus Direktiven wie noindex, nofollow, noarchive, max-snippet und unavailable_after, kann ihn auf einen einzelnen Crawler beschränken und schreibt die passenden Apache-FilesMatch-Blöcke, Nginx-location-Blöcke und PHP-Aufrufe für die Dateiendungen, die Sie angeben.

So verwenden Sie X-Robots-Tag-Header-Generator

  1. Listen Sie die abzudeckenden Dateiendungen auf, etwa pdf und docx, und setzen Sie die gewünschten Direktiven.
  2. Optional können Sie einen einzelnen Crawler nennen oder ein unavailable_after-Datum bzw. Snippet-Grenzen angeben.
  3. Kopieren Sie die Apache-, Nginx- oder PHP-Regel in Ihre Serverkonfiguration und testen Sie dann eine Datei mit einem Header-Checker.

Warum dieses Tool?

Auch bekannt als

Häufig gestellte Fragen

Warum dürfen diese Dateien nicht in der robots.txt blockiert werden?

Ein Crawler, der blockiert ist, ruft die Datei nie auf und sieht den Header daher nie. Die Adresse kann dann ohne Snippet in den Ergebnissen bleiben.

Brauche ich mod_headers auf Apache?

Ja, die Header-Direktive stammt aus mod_headers. Die meisten Hoster aktivieren es, und Sie können es mit apachectl -M prüfen.

Reicht noindex aus, um eine bereits gelistete Datei zu entfernen?

Der Eintrag wird entfernt, sobald der Crawler die Datei erneut besucht und den Header liest. Die Search Console kann das beschleunigen.

Ist X-Robots-Tag-Header-Generator kostenlos?

Ja. X-Robots-Tag-Header-Generator auf Toolipedia ist kostenlos nutzbar, ohne Anmeldung und ohne Wasserzeichen.

Ist die Nutzung sicher?

Ja. Alles wird in Ihrem Browser berechnet, und nichts von Ihren Eingaben wird an unseren Server gesendet.

Funktioniert es auf meinem Smartphone?

Ja. Es funktioniert in jedem modernen Browser auf Android und iPhone sowie auf Tablets und Computern. Sie müssen nichts installieren.

Brauche ich ein Konto?

Nein. Öffnen Sie einfach die Seite und nutzen Sie das Tool. Keine Anmeldung, keine E-Mail-Adresse nötig.

Kann ich X-Robots-Tag-Header-Generator auf meiner eigenen Website einsetzen?

Ja. Nutze unter dem Tool die Schaltfläche „Auf deiner Website einbetten“, um ein kurzes Stück Code zu kopieren und in deine Seite einzufügen. Es ist kostenlos, braucht kein Konto, und das Tool funktioniert weiter innerhalb deiner Seite.

Ähnliche Tools