Meta Name Robots

Meta Tags Robots: Bedeutung und Anwendung

Ein Robots-Meta-Tag ist eine spezielle Anweisung im HTML-Code einer Webseite, die Suchmaschinen-Crawlern mitteilt, wie sie mit einer Seite umgehen sollen. Diese Tags helfen dabei, Inhalte gezielt zu indexieren oder aus Suchergebnissen auszuschließen. Besonders in der Suchmaschinenoptimierung spielen sie eine große Rolle, um Duplicate Content zu vermeiden oder Seiten von der Indexierung auszunehmen. Die richtigen Anweisungen im Robots-Tag bestimmen, ob eine Seite sichtbar bleibt oder nicht.

Wie sieht ein Robots-Meta-Tag aus?

Der Robots-Meta-Tag wird im <head>-Bereich einer Webseite eingefügt und hat folgende Grundstruktur:

<meta name="robots" content="noindex, nofollow" />

Falls du ein Content-Management-System wie WordPress nutzt, kannst du SEO-Plugins wie Yoast SEO verwenden, um diese Meta-Tags einfacher zu verwalten. Ein Robots-Meta-Tag mit noindex sorgt dafür, dass die Seite nicht in den Suchergebnissen erscheint, während nofollow verhindert, dass Links auf der Seite verfolgt werden. Darüber hinaus kannst du mit nosnippet verhindern, dass Suchmaschinen eine Vorschau oder ein Snippet für die Seite anzeigen.

Attribute im Robots-Meta-Tag

Ein Robots-Meta-Tag besteht aus zwei Hauptattributen: name und content. Diese bestimmen, wie sich die Suchmaschinen verhalten.

  • name: Gibt an, auf welchen Crawler sich die Anweisung bezieht. „robots“ bedeutet alle Crawler, während „googlebot“ sich nur an Google richtet.
  • content: Definiert, welche Anweisungen der Crawler befolgen soll. Gängige Werte sind:
Wert Bedeutung
noindex Die Seite soll nicht in den Suchergebnissen erscheinen.
nofollow Suchmaschinen sollen den Links auf der Seite nicht folgen.
nosnippet Kein Snippet soll in den Suchergebnissen angezeigt werden.
noarchive Suchmaschinen dürfen keine gecachte Version der Seite speichern.
noimageindex Bilder dieser Seite sollen nicht in der Google-Bildersuche erscheinen.

Wann setzt man Meta Tags Robots ein?

Meta Tags Robots sind besonders in folgenden Situationen nützlich:

  • Vermeidung von Duplicate Content, um Ranking-Probleme zu verhindern.
  • Ausblendung nicht relevanter Seiten wie Admin-Panels oder interne Suchseiten.
  • Temporäres Verstecken von Seiten während einer Überarbeitung.
  • Blockierung von urheberrechtlich geschützten Inhalten.
  • Unterdrückung von Snippets in den Suchergebnissen mit nosnippet.

Alternativen zum Robots-Meta-Tag

Während Robots-Meta-Tags häufig genutzt werden, gibt es weitere Methoden zur Steuerung des Crawling- und Indexierungsverhaltens:

  • X-Robots-Tag: Kann im HTTP-Header einer Seite verwendet werden, um Suchmaschinenanweisungen zu geben.
  • robots.txt: Steuert den Zugriff von Crawlern auf ganze Verzeichnisse, sollte jedoch nicht für die Indexierung verwendet werden.
  • Canonical-Tag: Weist darauf hin, welche Version einer Seite als Hauptversion betrachtet werden soll.

Wichtige Hinweise zur Verwendung

Einige Dinge solltest du beachten, wenn du Meta Tags Robots einsetzt:

  • Suchmaschinen dürfen eine Seite nicht in den Index aufnehmen, wenn sie nicht gecrawlt werden kann. Falls du die Seite in der robots.txt blockierst, kann der Robots-Meta-Tag möglicherweise nicht ausgelesen werden.
  • Die Kombination noindex, follow bedeutet, dass die Seite selbst nicht indexiert wird, aber Suchmaschinen den Links darauf trotzdem folgen dürfen.
  • Suchmaschinen könnten nofollow nach einiger Zeit anders interpretieren und trotzdem Links bewerten.
  • Die Angabe von nosnippet kann dazu führen, dass kein Beschreibungstext in den Suchergebnissen angezeigt wird.

Fazit

Meta Tags Robots sind ein wichtiges Werkzeug für die SEO-Steuerung und bieten Kontrolle darüber, welche Inhalte indexiert und wie sie von Suchmaschinen behandelt werden. Durch die richtige Kombination dieser Tags kannst du sicherstellen, dass deine Webseite optimal von Suchmaschinen erfasst wird, ohne unerwünschte Inhalte in den Index zu lassen. Besonders noindex, nofollow und nosnippet sind entscheidend, um Inhalte gezielt aus den Suchergebnissen fernzuhalten. Eine korrekte Implementierung dieser Anweisungen kann den Unterschied zwischen einer gut sichtbaren und einer ungewollt indexierten Seite ausmachen.