Robots Meta Tag

In Kürze: Robots Meta Tag

Der Robots Meta Tag ist ein wichtiges Steuerungstool für das Indexierungsmanagement von Webseiten. Er ermöglicht es, spezifische Anweisungen für Suchmaschinen-Crawler auf URL-Ebene zu geben, im Gegensatz zur Robots.txt-Datei, die für die gesamte Domain gilt.

Erklärung: Robots Meta Tag

Der Robots Meta Tag ist ein spezielles -Tag, das im Kopfbereich (Head) einer Webseite eingefügt wird. Er gibt Suchmaschinen-Crawlern (auch Spiders genannt) Anweisungen, wie sie die Seite behandeln sollen. Dieser Tag ist entscheidend für das Indexierungsmanagement, da er spezifische Crawling-Bedingungen für einzelne URLs festlegt.

Funktionen des Robots Meta Tags

Es gibt verschiedene Anweisungen, die im Robots Meta Tag verwendet werden können:

  • noindex: Verhindert, dass die Seite im Index der Suchmaschine aufgenommen wird.
  • nofollow: Weist die Crawler an, den Links auf der Seite nicht zu folgen.
  • noarchive: Verhindert die Erstellung einer gecachten Kopie der Seite.

Unterschied zur Robots.txt-Datei

Im Gegensatz zur Robots.txt-Datei, die die Zugänglichkeit für die gesamte Domain definiert, ermöglicht der Robots Meta Tag eine präzisere Steuerung auf URL-Ebene. Wenn eine domainübergreifende Steuerung gewünscht ist, ist die Verwendung der Robots.txt-Datei empfehlenswert.

Wo findet man den Robots Meta Tag?

Der Robots Meta Tag ist im Quellcode der Webseite zu finden, typischerweise im Header-Bereich. Er ist leicht zugänglich und kann von Webmastern einfach implementiert werden.

Für weitere Informationen über den Robots Meta Tag und seine Verwendung besuchen Sie die Google Search Central.

« Back to Glossary Index