Wenn Sie erfahren möchten, welche URLs betroffen sind, nutzen Sie in der Search Console den Bericht „Abdeckung“ (je nach deutscher Übersetzung auch „Seitenindexierung“ genannt). Unter dem Abschnitt „Warum Seiten nicht indexiert werden“ finden Sie die Zeile „Durch "noindex"-Tag ausgeschlossen“. Klicken Sie darauf, wird Ihnen eine Liste aller URLs angezeigt, die von diesem Ausschluss betroffen sind. Für jede einzelne URL können Sie sogar das URL-Prüftool öffnen (Lupe-Symbol). Dort sehen Sie in den Details zum Indexierungsstatus, dass unter „Indexierung zulässig?“ oftmals „Nein: „noindex“ im Meta-Tag „robots“ erkannt“ steht.
Um dieses Problem zu beheben, müssen Sie auf den betroffenen Seiten das noindex-Tag entfernen. Das kann bedeuten:
- Prüfen Sie im CMS oder in Ihrem SEO-Plugin, ob irgendwo die Noindex-Option aktiviert ist (z.B. kann oft pro Seite oder global festgelegt werden, bestimmte Seitentypen nicht zu indexieren). Schalten Sie diese Option für die gewünschten Seiten ab.
- Untersuchen Sie den Quellcode oder die HTTP-Header der Seite auf ein hart codiertes `<meta name="robots" content="noindex">` oder auf ein `X-Robots-Tag: noindex`. Entfernen Sie es, falls gefunden.
- Vergewissern Sie sich, dass keine robots.txt-Regel die Seite blockiert, da Google in diesem Fall das noindex-Tag gar nicht sehen würde.
Nachdem das noindex-Tag entfernt ist, können Sie in der Search Console unter URL-Prüftool die betreffende URL nochmals live testen. Sie sollte dann im Abschnitt „Indexierung zulässig?“ als „Ja“ erscheinen. Anschließend klicken Sie auf „Indexierung beantragen“, um Google zu informieren, dass die Seite erneut gecrawlt und indexiert werden soll. Google lädt im Live-Test die Seite neu und zeigt, ob das Tag nun verschwunden ist. Laut Google-Dokumentation dauert die Neubewertung typischerweise nur ein paar Tage: „Indexing typically takes only a day or so, but can take much longer in some cases“. Rechnen Sie also damit, dass die Änderungen nach ein paar Tagen sichtbar werden, eventuell könnten es bis zu ein bis zwei Wochen dauern.
Wichtiger Hinweis zum Sitemap-Eintrag: Falls Sie das noindex-Tag absichtlich verwenden, passen Sie auch Ihre Sitemap an. Seiten, die Sie bewusst von Google fernhalten möchten, sollten nicht in Ihrer Sitemap aufgeführt sein, da Sitemaps ausdrücken, dass diese Seiten indexiert werden sollen. Google weist darauf hin, dass keine Sitemap auf mit gekennzeichnete Seiten verweisen sollte, weil das widersprüchliche Signale sendet.