Noindex vs. Nofollow: Unterschied und Vergleich mit Disallow

Der Unterschied zwischen noindex und nofollow ist ein zentrales Thema des technischen SEO, um zu verstehen, wie Suchmaschinen Websites crawlen, indexieren und deren Links bewerten. Eine falsch eingesetzte noindex-Direktive kann wertvolle Seiten aus den Suchergebnissen entfernen. Eine fehlerhafte Disallow-Regel kann dazu führen, dass der Googlebot nicht auf wichtige Inhalte zugreifen kann.

Im technischen SEO-Management des Jahres 2026 reicht es nicht aus, nur Inhalte zu erstellen. Sie müssen auch steuern, auf welche Seiten Suchmaschinen zugreifen dürfen, welche URLs indexiert werden können und wie Links interpretiert werden. In diesem Leitfaden betrachten wir die Direktiven noindex, nofollow und disallow anhand technischer Beispiele, einer Vergleichstabelle und umsetzbarer Prüfschritte.

Was ist der Unterschied zwischen noindex und nofollow? Die wichtigsten Grundlagen

Noindex, nofollow und disallow sind Suchmaschinen-Anweisungen mit unterschiedlichen Zwecken. Sie sind nicht gegeneinander austauschbar. Der grundlegende Unterschied liegt darin, welchen der Prozesse Crawling, Indexierung und Linkbewertung sie jeweils beeinflussen.

Was ist noindex?

Noindex ist eine Indexierungsdirektive, die Suchmaschinen mitteilt, dass eine bestimmte Seite nicht in den Suchergebnissen angezeigt werden soll. Wenn der Googlebot die Seite crawlt und eine gültige noindex-Regel erkennt, entfernt er die betreffende URL aus dem Google-Suchindex bzw. nimmt sie gar nicht erst in den Index auf.

Wenn Sie beispielsweise nicht möchten, dass die nutzerspezifische Bestätigungsseite eines Onlineshops in den Suchergebnissen erscheint, können Sie noindex verwenden. Die Seite bleibt für Nutzer weiterhin erreichbar, kann aber aus den Google-Suchergebnissen ausgeschlossen werden.

Noindex ist jedoch kein Mechanismus zur Zugriffssicherheit. Er verbirgt den Inhalt der Seite weder vor Besuchern noch vor unbefugten Personen.

Was ist nofollow?

Nofollow ist eine Direktive bzw. ein Link-Attribut, das Suchmaschinen Hinweise zum Umgang mit Links gibt. Es kann in zwei Formen verwendet werden: als Robots-Meta-Direktive auf Seitenebene und als Attribut rel="nofollow" bei einzelnen Links.

Nofollow auf Seitenebene teilt der Suchmaschine mit, dass sie den Links auf der betreffenden Seite nicht folgen soll. Nofollow auf Linkebene wirkt sich dagegen nur auf die Bewertung des markierten Links aus.

Google behandelt den Wert rel="nofollow" bei Links seit 2019 als Signal bei der Ranking-Bewertung, also als Hinweis und nicht als verbindliche Sperre. Nofollow garantiert daher nicht, dass die Zielseite unter keinen Umständen entdeckt wird.

Was ist disallow?

Disallow ist eine Regel in der robots.txt-Datei, die verhindern soll, dass Suchmaschinen-Bots bestimmte URL-Pfade crawlen. Der Googlebot ermittelt erlaubte und gesperrte Pfade, indem er die robots.txt-Datei ausliest.

Eine Disallow-Regel für das Verzeichnis /internal-reports/ beschränkt beispielsweise den Zugriff des Googlebots auf die URLs in diesem Verzeichnis. URLs, die über andere Quellen entdeckt werden, können jedoch auch ohne gecrawlte Inhalte in den Suchergebnissen erscheinen.

Daher gilt: Disallow bedeutet nicht dasselbe wie noindex. Das eine steuert den Crawling-Zugriff, das andere die Indexierung in den Suchergebnissen.

Vergleichstabelle: noindex, nofollow und disallow

Der praktischste Weg, den Unterschied zwischen den drei Anweisungen zu verstehen, ist ein Vergleich dessen, was der Googlebot bei der jeweiligen URL tun kann.

Die wichtigste Erkenntnis aus der Tabelle: Nicht zu wollen, dass eine Seite von Google gecrawlt wird, und nicht zu wollen, dass sie in den Suchergebnissen erscheint, sind unterschiedliche technische Ziele.

Gerade bei Websites mit Tausenden von URLs kann der falsche Einsatz dieser Direktiven die Index-Abdeckung und die Crawling-Effizienz beeinträchtigen. Deshalb sollte jede Direktive bei einer umfassenden technischen SEO-Optimierung einzeln bewertet werden.

Wie wird noindex verwendet und bei welchen Seiten ist es sinnvoll?

Bei noindex geht es im Kern darum, Seiten zu steuern, die für Nutzer erreichbar sein sollen, aber nicht in den organischen Suchergebnissen erscheinen sollen. Google unterstützt für HTML-Seiten das Robots-Meta-Tag und für andere Dateitypen wie PDFs den HTTP-Response-Header.

Noindex mit dem Robots-Meta-Tag

Bei HTML-Seiten üblich ist das Tag <meta name="robots" content="noindex">, das im head-Bereich des Dokuments platziert wird.

Diese Direktive gilt nicht nur für Google, sondern kann auch von anderen Suchmaschinen interpretiert werden, die sie unterstützen. Wenn Sie nur den Googlebot ansprechen möchten, können Sie anstelle von robots den Namen googlebot verwenden.

Ein wichtiges technisches Detail: Der Googlebot muss auf die Seite zugreifen können, um das noindex-Tag zu lesen. Eine noindex-Direktive bei einer URL, deren Crawling über die robots.txt gesperrt ist, wird von Google unter Umständen nicht erkannt.

Noindex mit X-Robots-Tag

Um die Indexierung von PDFs, Bildern oder anderen Nicht-HTML-Ressourcen zu steuern, kann im HTTP-Response der Header X-Robots-Tag: noindex verwendet werden.

So lässt sich zum Beispiel eine PDF-Datei verwalten, die öffentlich zugänglich bleiben soll, aber nicht in den Google-Suchergebnissen erscheinen soll. Sie sollten prüfen, dass der HTTP-Header tatsächlich vom Server gesendet wird, und zwar in der Live-Antwort und nicht nur in der Entwicklungsumgebung.

Seitentypen, bei denen noindex infrage kommt

• Bestätigungsseiten: Seiten ohne organisches Suchziel, etwa „Zahlung abgeschlossen“ oder „Formular gesendet“.
• Interne Suchergebnisse: Ergebnis-URLs, die dynamisch durch Nutzeranfragen entstehen und keinen eigenständigen Suchwert haben.
• Bestimmte Filterkombinationen: Gefilterte Seiten ohne Suchnachfrage, die zahlreiche ähnliche URLs erzeugen.
• Öffentlich erreichbare Testseiten: Inhalte, die keine Sichtbarkeit in der Suche haben sollen, deren Zugriffssicherheit aber separat verwaltet wird.
• Doppelte Hilfsseiten: Einige Hilfs-URLs ohne eigenständiges Suchziel und ohne Nutzerwert.

Nicht jeder Filter oder jeder ähnliche Inhalt sollte automatisch auf noindex gesetzt werden. Ein Filter einer Produktkategorie mit monatlicher Suchnachfrage kann bei richtiger Optimierung beispielsweise organischen Traffic liefern.

Bei Indexierungsentscheidungen sollten daher Suchintention, organische Performance und der Beitrag der Seite zur Conversion gemeinsam bewertet werden.

Wie funktioniert nofollow? Linktypen und SEO-Wirkung

Das häufigste Missverständnis bei nofollow ist die Annahme, das Attribut mache den Link für Google völlig unsichtbar. Tatsächlich ist nofollow eines der Signale, die Google bei der Interpretation von Links berücksichtigt.

Nofollow auf Linkebene

Wenn Sie einem bestimmten Link das Attribut rel="nofollow" hinzufügen, teilen Sie Google mit, dass Sie nicht mit diesem Link in Verbindung gebracht werden möchten. Dieser Ansatz kann insbesondere dann genutzt werden, wenn Vorbehalte gegenüber der verlinkten Quelle bestehen.

Google empfiehlt für bezahlte Links und nutzergenerierte Inhalte jedoch aussagekräftigere Attribute.

Für bezahlte Links ist sponsored, für Kommentar- und Forenlinks ugc die aussagekräftigere Wahl. Bei Bedarf können diese Attribute zusammen mit nofollow verwendet werden.

Nofollow auf Seitenebene

Wenn Sie eine allgemeine Regel für die Links einer Seite festlegen möchten, können Sie <meta name="robots" content="nofollow"> verwenden.

Diese Methode weist die Suchmaschine an, den Links auf der Seite nicht zu folgen. Die Indexierung der Seite selbst verhindert sie jedoch nicht.

Insbesondere bei Kategorie-, Produkt- und Artikelseiten sollte auf ein pauschales nofollow verzichtet werden. Interne Links helfen Suchmaschinen nämlich, die Seitenstruktur zu verstehen und verwandte Inhalte zu entdecken.

Die Analyse der internen Verlinkung und der Link-Attribute ist ein wichtiger Bestandteil von SEO-Audit und Reporting.

Disallow-Regeln in der robots.txt und typische Fehler

Die robots.txt-Datei liegt im Stammverzeichnis der Website und legt fest, auf welche URL-Pfade regelkonforme Crawler zugreifen dürfen. Disallow ist eine der grundlegenden Anweisungen dieser Datei.

Wie wird eine Disallow-Regel geschrieben?

Wenn Sie in der robots.txt-Datei beispielsweise User-agent: Googlebot und anschließend Disallow: /internal/ verwenden, verhindert das, dass der Googlebot die URLs unter dem Pfad /internal/ crawlt.

Um alle regelkonformen Crawler anzusprechen, kann User-agent: * verwendet werden. Die Regel Disallow: / kann das Crawling der gesamten Website für die jeweilige Crawler-Gruppe verhindern und sollte daher äußerst sorgfältig eingesetzt werden.

Disallow-Regeln arbeiten pfadbasiert. Eine fehlerhafte Pfadangabe kann auch wichtige URLs außerhalb des gewünschten Bereichs betreffen.

Ausführlichere Informationen zur Konfiguration der robots.txt finden Sie im Beitrag Robots.txt-Datei richtig schreiben: Leitfaden mit Beispielen.

Sollten noindex und disallow gemeinsam verwendet werden?

Einer der kritischsten technischen SEO-Fehler ist es, bei einer URL, die aus den Suchergebnissen entfernt werden soll, sowohl noindex als auch ein robots.txt-Disallow anzuwenden.

Bedenken Sie: Wenn der Googlebot wegen der robots.txt nicht auf die Seite zugreifen kann, kann er das noindex-Tag im HTML nicht lesen. Die URL kann aufgrund eines Links von einer anderen Website entdeckt werden und selbst ohne gecrawlte Inhalte in den Suchergebnissen erscheinen.

Wenn Sie eine Seite aus dem Google-Index entfernen möchten, müssen Sie daher zunächst sicherstellen, dass der Googlebot die noindex-Regel lesen kann.

Wann sollte disallow verwendet werden?

• Bei bestimmten Parameterpfaden, die aus Crawling-Sicht überflüssig sind und eine große Zahl von URLs erzeugen.
• Bei technischen URL-Bereichen, auf die die Suchmaschine nicht zugreifen soll und bei denen es keine Garantie für den Ausschluss aus dem Index braucht.
• Bei großen Websites, um nachweislich unnötige Crawling-Last zu reduzieren.
• Bei bestimmten Anwendungs-Endpunkten, die nicht von Bots gecrawlt werden müssen, ohne dass dadurch Sicherheitsmaßnahmen ersetzt werden.

Disallow ersetzt keine Sicherheitskontrolle. Für Admin-Bereiche, personenbezogene Daten und vertrauliche Dateien sollten Sitzungsauthentifizierung, Zugriffsautorisierung und eine angemessene Serversicherheit eingesetzt werden.

Wie wählt man die richtige Direktive bei Onlineshops und Unternehmenswebsites?

Die richtige Direktive sollte sich zuerst an der Funktion der Seite und den organischen Suchzielen orientieren und erst danach an der technischen Struktur. Besonders bei Onlineshops können Filter, Sortierungen, interne Suche und Produktvarianten sehr viele URLs erzeugen.

Beispiel: Onlineshop

Stellen wir uns einen hypothetischen Onlineshop mit 10.000 Produkten vor, bei dem Filter für Farbe, Größe, Marke und Preis in verschiedenen Kombinationen URLs erzeugen. Alle diese URLs zu indexieren, kann zu Duplicate-Content-Problemen und unnötiger Crawling-Last führen.

Einige Filterseiten, die beliebte Marken und Produkteigenschaften kombinieren, können jedoch eine echte Suchnachfrage bedienen. Solche Seiten automatisch auf noindex zu setzen, kann Chancen auf organischen Traffic einschränken.

Ähnliche Entscheidungen können bei unterschiedlichen Shopsystemen zu unterschiedlichen technischen Ergebnissen führen. Im Rahmen der E-Commerce-SEO-Optimierung sollten daher URL-Inventar, Canonical-Tags, Filterverhalten und Indexierungsberichte gemeinsam analysiert werden.

Beispiel: Unternehmenswebsite

Bei einer Unternehmenswebsite zielen Leistungsseiten, Branchenlösungen und Referenzinhalte in der Regel auf Sichtbarkeit in der Suche ab. Wird bei diesen Seiten versehentlich noindex gesetzt, können die betreffenden Leistungen aus den Google-Ergebnissen verschwinden.

Dagegen können Formularbestätigungen, bestimmte Anwendungsansichten und Hilfsseiten ohne eigenständigen Suchwert vom Index ausgeschlossen bleiben. Werden diese Entscheidungen im Unternehmens-SEO URL-bezogen dokumentiert, sinkt bei späteren Website-Updates das Fehlerrisiko.

Wie prüft man Indexierungsfehler mit der Google Search Console?

Direktiven umzusetzen ist wichtig, ihre Wirkung zu überprüfen ebenso. Die Google Search Console ermöglicht über die URL-Prüfung und die Berichte zur Seitenindexierung die Untersuchung von Crawling- und Indexierungsproblemen.

Technische Prüfung Schritt für Schritt

1. URL-Inventar erstellen: Legen Sie fest, welche URL-Gruppen indexiert werden sollen, welche außerhalb des Index bleiben und bei welchen das Crawling eingeschränkt werden soll.
2. HTTP-Antworten prüfen: Kontrollieren Sie Statuscodes, Weiterleitungen und X-Robots-Tag-Header der Seiten.
3. Robots-Meta-Tags verifizieren: Prüfen Sie die vom Googlebot abrufbare HTML-Ausgabe der Live-Seite.
4. Zugriff über die robots.txt untersuchen: Prüfen Sie, ob kritische URLs versehentlich unter eine Disallow-Regel fallen.
5. Search-Console-Berichte vergleichen: Bewerten Sie URL-Gruppen, die wegen noindex ausgeschlossen sind, getrennt von URLs, die durch die robots.txt blockiert werden.
6. URL-Prüfung durchführen: Untersuchen Sie bei wichtigen Seiten Crawling-Zugriff, Indexierbarkeit und die von Google gewählte Canonical-URL.
7. Änderungen überwachen: Beobachten Sie nach Korrekturen den Status des erneuten Crawlings und die Veränderung der organischen Performance.

Eine URL, die durch die robots.txt blockiert wird, und eine URL, die wegen noindex ausgeschlossen ist, sind nicht dasselbe Problem. Im ersten Fall kann der Googlebot unter Umständen nicht auf den Inhalt der Seite zugreifen; im zweiten Fall erkennt er die noindex-Regel und setzt die Indexierungsentscheidung um.

Technische SEO-Checkliste vor dem Livegang

• Prüfen Sie, dass Seiten, die organischen Traffic erzielen sollen, nicht versehentlich noindex enthalten.
• Kontrollieren Sie, dass der Googlebot auf Seiten mit noindex zugreifen kann.
• Überprüfen Sie weitreichende Disallow-Regeln in der robots.txt-Datei.
• Suchen Sie nach unnötigem nofollow bei internen Links.
• Prüfen Sie, dass gesponserte und nutzergenerierte Links mit den passenden Attributen gekennzeichnet sind.
• Stellen Sie sicher, dass die XML-Sitemap die Canonical-URLs enthält, die indexiert werden sollen.
• Entfernen Sie beim Wechsel in die Live-Umgebung noindex-Regeln, die aus der Testumgebung übrig geblieben sind.
• Beobachten Sie nach wichtigen Änderungen regelmäßig die Daten der Search Console.

Zur Verwaltung der URLs, die in XML-Sitemaps indexiert werden sollen, kann außerdem der Leitfaden XML-Sitemap: Best Practices herangezogen werden.

Gerade bei Website-Umzügen und Relaunches müssen Änderungen an robots.txt, Meta-Robots, Canonical und Sitemap gemeinsam getestet werden. Andernfalls können Seiten, die technisch erreichbar erscheinen, unerwartet außerhalb des Suchindex landen.

Häufig gestellte Fragen

Können noindex und nofollow gleichzeitig verwendet werden?

Ja, noindex und nofollow können auf einer Seite gemeinsam definiert werden. Noindex sorgt dafür, dass die Seite nicht in den Suchergebnissen angezeigt wird, während nofollow eine Anweisung erzeugt, den Links auf der Seite nicht zu folgen. Diese Kombination ist jedoch nicht für jede Seite nötig und kann die Entdeckung interner Links unnötig einschränken.

Erscheint eine Seite mit disallow in Google?

Ja, eine URL, für die über die robots.txt ein Disallow gilt, kann über andere Links entdeckt werden und in den Google-Ergebnissen erscheinen. Disallow verhindert das Crawling, garantiert aber nicht, dass die URL außerhalb des Index bleibt. Um eine Seite aus den Suchergebnissen zu entfernen, sollte eine erreichbare noindex-Regel oder eine andere geeignete Entfernungsmethode verwendet werden.

Verhindern nofollow-Links den SEO-Wert vollständig?

Nein, Google kann das Link-Attribut rel="nofollow" als Hinweis statt als verbindliche Sperre behandeln. Daher lässt sich nicht garantieren, dass der Einfluss des Links auf Entdeckungs- oder Ranking-Systeme vollständig aufgehoben wird. Für gesponserte Links sollte sponsored und für nutzergenerierte Links ugc bevorzugt werden.

Wann wird eine Seite mit noindex aus Google entfernt?

Damit die noindex-Regel wirkt, muss der Googlebot die Seite erneut crawlen und die Direktive erkennen. Dieser Prozess hängt von der Crawling-Häufigkeit der Seite ab, ein fester Zeitraum kann nicht garantiert werden. Über die URL-Prüfung in der Search Console kann ein erneutes Crawling angefordert werden.

Kann noindex in der robots.txt verwendet werden?

Nein, Google unterstützt die noindex-Anweisung in der robots.txt-Datei nicht. Um die Indexierung zu verhindern, sollten das HTML-Robots-Meta-Tag oder der HTTP-Header X-Robots-Tag verwendet werden. Außerdem muss der Googlebot auf die betreffende URL zugreifen können.

Sollten Seiten mit noindex in die XML-Sitemap aufgenommen werden?

Grundsätzlich sollten XML-Sitemaps die Canonical-URLs enthalten, die Sie indexiert haben möchten. Seiten, die dauerhaft auf noindex stehen, in der Sitemap zu belassen, erzeugt daher widersprüchliche Signale. Es wird empfohlen, die Sitemap mit Ihrer Indexierungsstrategie in Einklang zu halten.

Fazit: Indexierungskontrolle mit der richtigen SEO-Direktive stärken

Der Unterschied zwischen noindex und nofollow ist mehr als nur die Abgrenzung zweier technischer Tags. Noindex steuert die Indexierung, nofollow die Bewertung von Links und disallow den Crawling-Zugriff der Bots auf URLs. Wenn jede Direktive an der richtigen Stelle eingesetzt wird, können Suchmaschinen die Struktur Ihrer Website zuverlässiger verarbeiten.

Gerade bei großen Unternehmenswebsites und E-Commerce-Projekten können falsche Direktiven dazu führen, dass wichtige Seiten nicht indexiert werden, unnötige Crawling-Last entsteht und organische Sichtbarkeit verloren geht. Für eine saubere Umsetzung sollten URL-bezogene Analysen, Prüfungen der Live-Antworten und die Daten der Search Console gemeinsam betrachtet werden.

Möchten Sie die Indexierungs- und Crawling-Konfiguration Ihrer Website professionell prüfen lassen? SEO Performans analysiert im Rahmen technischer SEO-Audits fehlerhafte noindex-Einsätze, Zugriffsprobleme durch die robots.txt und Probleme im Linkmanagement und liefert priorisierte Optimierungsempfehlungen.

Um die technische SEO-Grundlage Ihrer Website zu bewerten und einen Fahrplan zu entwickeln, der zu Ihren Zielen für organisches Wachstum passt, nehmen Sie Kontakt mit SEO Performans auf.