Was sind Meta-Robots-Tags?
Meta-Robots-Tags teilen Suchmaschinen mit, wie eine bestimmte Seite behandelt werden soll – ob sie indexiert, ihre Links verfolgt oder ihre Inhalte zwischengespeichert werden sollen.
Bereit zur Umsetzung?
BuzzRank automatisiert Ihre SEO-Content-Erstellung mit KI. Generieren Sie optimierte Artikel in Minuten.
Was sind Meta-Robots-Tags?
Meta-Robots-Tags sind HTML-Direktiven, die im <head>-Bereich einer Seite platziert werden und Suchmaschinen-Crawlern mitteilen, wie diese bestimmte Seite behandelt werden soll. Sie steuern die Indizierung, das Verfolgen von Links, die Snippet-Anzeige und das Caching-Verhalten.
Betrachten Sie sie als Anweisungen, die Sie für Such-Bots hinterlassen: "Indexiere diese Seite, aber verfolge nicht ihre Links" oder "Zeige diese Seite überhaupt nicht in den Suchergebnissen an."
Häufige Meta-Robots-Direktiven
Kern-Direktiven
index / noindex
Steuert, ob die Seite in den Suchergebnissen erscheint.
index(Standard) = "Zeige diese Seite in den Suchergebnissen an"noindex= "Zeige diese Seite nicht in den Suchergebnissen an"
Beispielhafte Anwendung: Verwenden Sie noindex für Ihre Dankesseiten, interne Suchergebnisse und doppelten Inhalt.
<meta name="robots" content="noindex">
follow / nofollow
Steuert, ob Suchmaschinen Links auf der Seite folgen.
follow(Standard) = "Crawle und zähle Links auf dieser Seite"nofollow= "Ignoriere alle Links auf dieser Seite für Ranking-Zwecke"
Beispielhafte Anwendung: Nofollow auf Seiten mit benutzergenerierten Inhalten (Foren, Kommentare), um Link-Spam zu verhindern.
<meta name="robots" content="nofollow">
Erweiterte Direktiven
noarchive
Verhindert, dass Suchmaschinen zwischengespeicherte Versionen Ihrer Seite anzeigen.
<meta name="robots" content="noarchive">
Anwendungsfall: Zeitkritische Inhalte (Veranstaltungsseiten, Verkäufe) oder Seiten mit Inhalten hinter einer Paywall.
nosnippet
Verhindert, dass Suchmaschinen Textausschnitte oder Videovorschauen in den Suchergebnissen anzeigen.
<meta name="robots" content="nosnippet">
Anwendungsfall: Sensibler Inhalt, bei dem Sie die Seite indexiert haben möchten, aber keinen Vorschau-Text sichtbar haben möchten.
max-snippet:[number]
Begrenzt die Länge der in den Suchergebnissen angezeigten Textausschnitte.
<meta name="robots" content="max-snippet:100">
Anwendungsfall: Steuern Sie, wie viel von Ihrem Inhalt in den Suchergebnissen erscheint.
max-image-preview:[size]
Steuert die maximale Größe von Bildvorschauen.
<meta name="robots" content="max-image-preview:large">
Optionen: none, standard, large
max-video-preview:[seconds]
Legt die maximale Dauer für Videovorschauen fest.
<meta name="robots" content="max-video-preview:30">
unavailable_after:[date]
Weist Suchmaschinen an, die Seite nach einem bestimmten Datum nicht mehr in den Ergebnissen anzuzeigen.
<meta name="robots" content="unavailable_after: 2026-12-31">
Anwendungsfall: Veranstaltungsseiten, zeitlich begrenzte Angebote.
Häufige Anwendungsfälle
1. Dünner oder doppelter Inhalt
<meta name="robots" content="noindex, follow">
Diese Seite nicht indexieren, aber ihre Links crawlen. Perfekt für:
- Tag-/Kategorieseiten mit wenig Inhalt
- Gefilterte Produktseiten
- Paginierte Archive (Seite 2, 3 usw.)
2. Benutzergenerierter Inhalt
<meta name="robots" content="index, nofollow">
Indexiere die Seite, aber gib keine Link-Equity von ihren Links weiter. Verwenden Sie dies auf:
- Foren-Threads
- Kommentarbereiche
- Benutzerprofile
3. Interne Tools / Admin-Seiten
<meta name="robots" content="noindex, nofollow">
Vollständig von der Suche blockieren. Verwenden Sie dies auf:
- Anmelde-/Abmeldeseiten
- Checkout-Abläufe
- Admin-Dashboards
- Interne Suchergebnisse
4. Zeitkritischer Inhalt
<meta name="robots" content="index, follow, unavailable_after: 2026-06-30">
Jetzt in der Suche anzeigen, aber nach einem Datum automatisch deindexieren. Verwenden Sie dies auf:
- Webinar-Registrierungsseiten
- Konferenzveranstaltungen
- Flash-Sales
Meta-Robots vs. X-Robots-Tag
Sie können Robots-Direktiven auch über HTTP-Header mit X-Robots-Tag festlegen. Dies ist nützlich für Nicht-HTML-Dateien (PDFs, Bilder, Videos).
Beispiel für einen HTTP-Header:
X-Robots-Tag: noindex, nofollow
Vorteile:
- Funktioniert mit jedem Dateityp (nicht nur HTML)
- Wendet Regeln an, ohne den Seitenquelltext zu bearbeiten
- Kann über die Serverkonfiguration festgelegt werden (.htaccess, nginx.conf)
Googlebot-Spezifische Tags
Richten Sie sich mit googlebot anstelle von robots an bestimmte Crawler:
<meta name="googlebot" content="noindex, nofollow">
Dies betrifft nur Google. Andere Suchmaschinen folgen den Standard-robots-Tags.
Anwendungsfall: Blockieren Sie Google, erlauben Sie aber Bing, Yandex usw.
Häufige Fehler, die es zu vermeiden gilt
❌ CSS/JS in robots.txt BLOCKIEREN UND Meta-Tags verwenden
Wenn Googlebot Ihre Seite nicht richtig laden kann, übersieht er möglicherweise Ihr Meta-Robots-Tag. Erlauben Sie immer das Crawlen von CSS/JS-Dateien.
❌ Versehentliches Noindexing wichtiger Seiten
Überprüfen Sie immer Ihre Meta-Robots-Tags. Überprüfen Sie die Search Console auf Warnungen "Ausgeschlossen durch 'noindex'-Tag".
❌ Verwenden von noindex, wenn Sie canonical meinen
Wenn Sie doppelten Inhalt haben, verwenden Sie Canonical-Tags, nicht noindex. Noindex entfernt die Seite vollständig. Canonical konsolidiert Signale.
❌ Widersprüchliche Direktiven
Verwenden Sie nicht sowohl <meta>-Tags als auch X-Robots-Tag mit unterschiedlichen Werten auf derselben Seite. Suchmaschinen folgen der restriktivsten Direktive.
So prüfen Sie Ihre Meta-Robots-Tags
1. Seitenweiter Crawl
Verwenden Sie Screaming Frog oder Sitebulb, um Ihre gesamte Website zu crawlen und alle Meta-Robots-Direktiven zu exportieren.
2. Google Search Console
Überprüfen Sie den Bericht "Abdeckung" auf Seiten, die aufgrund von noindex ausgeschlossen wurden. Stellen Sie sicher, dass dies beabsichtigt ist.
3. Manuelle Inspektion
Zeigen Sie den Seitenquelltext an (Strg+U) und suchen Sie nach <meta name="robots". Oder verwenden Sie die Browser-Entwicklertools (F12 → Elemente).
4. Automatisierte Überwachung
Richten Sie in der Search Console oder in SEO-Tools von Drittanbietern Benachrichtigungen ein, um Sie zu benachrichtigen, wenn hochwertige Seiten versehentlich noindexiert werden.
Best Practices
✅ Standardmäßig index, follow (oder gar kein Tag)
Fügen Sie nur Meta-Robots-Tags hinzu, wenn Sie ein nicht standardmäßiges Verhalten benötigen.
✅ Verwenden Sie noindex, follow für dünne Inhalte
Dies schützt Ihre Website-Qualität und ermöglicht gleichzeitig den Fluss von Link-Equity.
✅ Mit Canonical-Tags für Duplikate kombinieren
Canonical ist besser für doppelten Inhalt. Verwenden Sie Noindex nur, wenn die Seite keinen Mehrwert bietet.
✅ Seien Sie explizit, wenn Sie Staging-/Entwicklungsseiten blockieren
Fügen Sie immer noindex, nofollow zu Entwicklungs- und Staging-Umgebungen hinzu. Verwenden Sie die serverseitige Authentifizierung als Backup.
✅ Regelmäßig überprüfen
Überprüfen Sie Ihre Meta-Robots-Tags vierteljährlich. Seiten, die vor 6 Monaten dünn waren, könnten jetzt wertvoll sein.
Tools zur Verwaltung von Meta-Robots-Tags
- Yoast SEO (WordPress): Einfache Meta-Robots-Steuerung pro Beitrag/Seite
- Rank Math (WordPress): Erweiterte Robots-Einstellungen + Massenbearbeitung
- Screaming Frog: Crawlen und Exportieren aller Meta-Robots-Direktiven
- Sitebulb: Visuelle Berichte über Indizierungsprobleme
- Google Search Console: Überwachen Sie Noindex-Seiten und Indizierungsfehler
Zusammenfassung
Meta-Robots-Tags geben Ihnen eine detaillierte Kontrolle darüber, wie Suchmaschinen mit Ihren Seiten interagieren. Verwenden Sie sie strategisch, um:
- Blockieren Sie die Indizierung von Seiten mit geringer Qualität
- Verhindern Sie Link-Spam auf benutzergenerierten Inhalten
- Steuern Sie die Snippet-Anzeige und das Caching
- Automatisches Deindexieren von zeitkritischen Inhalten
Im Zweifelsfall ist weniger mehr. Fügen Sie nur Meta-Robots-Tags hinzu, wenn Sie das Standardverhalten überschreiben müssen.
Sind Sie bereit, Ihre gesamte Website in großem Maßstab zu optimieren? Testen Sie BuzzRank für 1 $ →
Häufig gestellte Fragen
Was ist der Unterschied zwischen Meta-Robots und robots.txt?▼
Kann ich mehrere Meta-Robots-Direktiven auf einer Seite verwenden?▼
Wie lange dauert es, bis Google noindex-Tags verarbeitet?▼
Bereit zur Umsetzung?
BuzzRank automatisiert Ihre SEO-Content-Erstellung mit KI. Generieren Sie optimierte Artikel in Minuten.
Verwandte Ressourcen
Was ist eine Canonical-URL?
Eine Canonical-URL teilt Suchmaschinen mit, welche Version einer Seite die 'Master'-Version ist, wenn mehrere URLs denselben Inhalt anzeigen.
GlossarWas ist doppelter Inhalt?
Doppelter Inhalt tritt auf, wenn identische oder sehr ähnliche Inhalte unter mehreren URLs erscheinen, was möglicherweise Ranking-Signale verwässert.
GlossarWas sind Nofollow-Links?
Nofollow-Links weisen Suchmaschinen an, keinen Ranking-Credit (PageRank) an die Ziel-URL weiterzugeben.