Robots-Meta-Tag
Das Robots-Meta-Tag (robots meta tag) ist ein im HTML-<head>-Bereich eingefügtes <meta name="robots">-Tag — ein Meta-Tag, das pro Seite anweist, wie eine Suchmaschine die jeweilige Seite indexiert und in den Suchergebnissen darstellt. Es ist der Behälter für einzelne Direktiven wie noindex, nofollow oder max-snippet und zugleich der Oberbegriff für diese gesamte Familie seitenbezogener Regeln.
Das Robots-Meta-Tag (robots meta tag) ist ein im HTML-<head>-Bereich eingefügtes <meta name="robots">-Tag — ein Meta-Tag, das pro Seite anweist, wie eine Suchmaschine die jeweilige Seite indexiert und in den Suchergebnissen darstellt. Es ist der Behälter für einzelne Direktiven wie noindex, nofollow oder max-snippet und zugleich der Oberbegriff für diese gesamte Familie seitenbezogener Regeln.
Warum es wichtig ist
Während robots.txt den Crawler-Zugriff auf Website-Ebene steuert, steuert das Robots-Meta-Tag präzise pro einzelner Seite, ob sie indexiert wird und wie sie in den Suchergebnissen dargestellt wird. Da es sowohl die "Indexsteuerung" — Login- oder Dankesseiten per noindex aus den Ergebnissen halten — als auch die "Darstellungssteuerung" — die im Snippet angezeigte Textmenge per max-snippet begrenzen — übernimmt, gehört es zu den am häufigsten genutzten Werkzeugen im technischen SEO.
Wichtige Direktiven
Die wichtigsten von Google unterstützten Direktiven sind:
| Direktive | Bedeutung |
|---|---|
all | Keine Einschränkung (Standardwert) |
noindex | Seite aus den Suchergebnissen ausschließen |
nofollow | Links auf der Seite nicht folgen |
none | Gleichbedeutend mit noindex, nofollow |
nosnippet | Kein Text-Snippet und keine Videovorschau anzeigen |
max-snippet:[Zahl] | Maximale Zeichenzahl des Text-Snippets begrenzen |
max-image-preview:[Einstellung] | Größe der Bildvorschau festlegen (none, standard, large) |
max-video-preview:[Zahl] | Maximale Länge der Videovorschau (Sekunden) begrenzen |
noimageindex | Bilder auf der Seite nicht indexieren |
notranslate | In den Suchergebnissen keine Übersetzung anbieten |
indexifembedded | Indexierung trotz noindex erlauben, wenn per iframe eingebettet |
unavailable_after:[Datum] | Nach dem angegebenen Datum aus den Suchergebnissen entfernen |
Mehrere Direktiven lassen sich mit Kommas kombinieren.
<meta name="robots" content="noindex, nofollow">
<meta name="robots" content="max-snippet:120, max-image-preview:large">
Einrichtung und Hinweise
name="robots" gilt für alle Suchmaschinen-Crawler, während sich mit name="googlebot" auch nur ein bestimmter Crawler ansprechen lässt. Stehen Regeln im Konflikt, gilt die restriktivere Regel. Sind beispielsweise max-snippet:50 und nosnippet gemeinsam gesetzt, hat nosnippet Vorrang.
Bei Nicht-HTML-Dateien wie PDFs oder Bildern lässt sich kein Meta-Tag einfügen, daher werden dieselben Direktiven über den HTTP-Antwort-Header X-Robots-Tag übermittelt.
Der häufigste Fehler ist die Vermischung mit einer robots.txt-Sperre. Wird das Crawling über robots.txt blockiert, kann die Suchmaschine die Seite nicht öffnen und das Robots-Meta-Tag selbst nicht lesen. Eine Seite, auf die noindex angewendet werden soll, muss daher zwingend zum Crawling freigegeben sein.
Snippet-Steuerung im KI-Zeitalter
Ursprünglich dienten nosnippet und max-snippet dazu, die Länge der Snippets in den Suchergebnissen anzupassen, doch mit der Verbreitung der KI-Suche hat sich ihre Bedeutung gewandelt. Google nennt in seiner offiziellen Dokumentation als Anwendungsbereich dieser Direktiven nicht nur die Websuche, Bilder und Discover, sondern auch AI Overviews und den AI-Modus. Wird nosnippet deklariert, wird sogar verhindert, dass der betreffende Inhalt als direkte Eingabe für KI-Antworten verwendet wird, und max-snippet begrenzt die Menge, die die KI zitieren darf.
Mit anderen Worten: Das Robots-Meta-Tag steuert nicht mehr nur, "wie viele Zeilen in den Suchergebnissen erscheinen", sondern auch, "wie stark mein Inhalt in KI-Antworten genutzt wird". Allerdings kann mit stärkeren Einschränkungen auch die Sichtbarkeitschance in der KI-Suche sinken, weshalb die Entscheidung den Trade-off zwischen Inhaltsschutz und Sichtbarkeit abwägen sollte.
Sources:
- Robots Meta Tags Specifications - Google Search Central
- AI Features and Your Website - Google Search Central
Wie inblog hilft
inblog verarbeitet das Robots-Meta-Tag automatisch, sodass für gewöhnliche Beitragsveröffentlichungen keine gesonderte Einstellung nötig ist. Gibt es einen Beitrag, den Sie aus den Suchergebnissen ausschließen möchten, nutzen Sie die noindex-Einstellung je Beitrag. Für die übrigen feineren Direktiven genügen die Standardwerte in den meisten Blog-Betrieben; ist es das Ziel, die Sichtbarkeit in der KI-Suche zu erhöhen, ist es vorteilhaft, keine Snippet-Beschränkung zu setzen.