Karte zu Crawling, Indexierung und Sitemap für bessere Auffindbarkeit
Bild: Reichweitenpfad

Auffindbarkeit

Wie verbessert man die Auffindbarkeit einer Website für Suchmaschinen?

Auffindbarkeit verbessern: So bringen Webmaster Websites in den Index, mit URLs, Sitemaps, interner Verlinkung und Werkzeugen wie Search Console und Bing.

Das Wichtigste auf einen Blick

  • Crawling steht am AnfangWas robots.txt, ein noindex-Wert oder ein Serverfehler blockiert, kann nicht ranken.
  • Der Seitenindexierungsbericht der Search Console nennt je Adresse den Status und den Grund für eine Nicht-Aufnahme.
  • Interne Links und eine gepflegte XML-Sitemap beschleunigen die Entdeckung neuer oder geänderter URLs.
  • Content muss die Suchintention treffen, sonst bleiben technisch saubere Seiten ohne Klicks.
  • Gemessen wird mit Search Console, Bing Webmaster Tools und dem URL-Prüftool, nicht nach Bauchgefühl.

Technische Zugänglichkeit: Crawling erst ermöglichen

Bevor eine Seite ranken kann, muss ein Crawler sie abrufen dürfen. Prüfen Sie zuerst die robots.txt im Wurzelverzeichnis der Domain und suchen Sie nach versehentlichen Disallow-Einträgen. Ein einzelner falscher Eintrag kann ganze Verzeichnisse aus dem Index halten, oft über Monate unbemerkt.

HTTP-Statuscodes im Überblick

Statuscode

200
Inhalt wird geliefert
301
Dauerhafter Umzug
302
Zwischenstation
404
Adresse verschwunden

Bedeutung

200
Für aktive Seiten korrekt
301
Für dauerhafte Umzüge nutzen
302
Falsch für dauerhafte Umzüge
404
Nur bei echten Löschungen

Empfehlung

200
301
302
404

Die zweite Prüfstation sind Meta-Tags und HTTP-Header mit noindex. Solche Werte stammen häufig aus einer Staging-Umgebung und wandern beim Relaunch mit. Prüfen Sie die Vorlagen im Content-Management-System, damit sie nicht unbemerkt auf allen Seiten aktiv bleiben.

Statuscodes geben dem Crawler eine klare Anweisung. Eine 200 liefert Inhalt, eine 301 zeigt einen dauerhaften Umzug an, eine 404 bedeutet, dass die Adresse verschwunden ist. Eine 302 bleibt eine Zwischenstation, für dauerhafte Umzüge ist sie die falsche Wahl.

Prüfen Sie außerdem, ob die Domain nur unter einer Adresse erreichbar ist. www und non-www, http und https sowie Varianten mit abschließendem Schrägstrich sollten auf eine kanonische Form weiterleiten. Sonst verteilen sich Signale auf mehrere Adressen mit identischem Inhalt.

JavaScript-lastige Seiten brauchen eine verlässliche Ausgangslage. Serverseitiges Rendern oder vorgerendertes HTML liefern Crawlern den Inhalt ohne Zeitverzug. Die offiziellen Webmaster-Richtlinien von Bing fassen zusammen, welche technischen Voraussetzungen dort gelten.

Ladezeit und mobile Darstellung entscheiden mit, wie viel Abrufbudget eine Seite verbraucht. Große unkomprimierte Bilder, blockierende Skripte und lange Weiterleitungsketten kosten Aufrufe. Messen Sie mit dem Core-Web-Vitals-Bericht in der Search Console und mit PageSpeed Insights.

Facettennavigation und Filterparameter erzeugen schnell Tausende ähnlicher URLs. Regeln Sie über Parameterdefinitionen, welche Kombinationen crawlbare Seiten bleiben. Alles andere wird per Canonical oder robots.txt gebündelt.

Gemischte Inhalte blockieren den sicheren Abruf. Wenn eine https-Seite Bilder oder Skripte über http nachlädt, werten Browser und Crawler das als unsicher. Prüfen Sie nach einem Umstieg auf verschlüsselte Übertragung alle eingebundenen Ressourcen.

Indexierung steuern und Fehler auslesen

Crawling und Indexierung sind zwei getrennte Schritte. Nach dem Abruf entscheidet die Suchmaschine, ob eine URL in den Index aufgenommen wird. Der Bericht zur Seitenindexierung in der Search Console dokumentiert diese Entscheidung je Adresse und nennt den Status.

Die Meldung 'Gefunden, zurzeit nicht indexiert' bedeutet, dass die Adresse bekannt ist, aber noch nicht verarbeitet wurde. 'Gecrawlt, zurzeit nicht indexiert' deutet auf eine Bewertung hin, die gegen eine Aufnahme spricht. Beide Fälle lassen sich meist über Inhalt, interne Links oder Duplikate klären.

Daneben stehen Status wie 'Duplikat, von Google als kanonisch gewählt' oder 'Alternative Seite mit richtiger kanonischer Auszeichnung'. Diese Gruppen sind meist unproblematisch, sagen aber viel über die Struktur der Website aus.

Arbeiten Sie den Bericht in Blöcken ab. Gruppen mit vielen betroffenen Adressen liefern den größten Effekt pro Korrektur. Eine einzelne wichtige Landingpage bleibt trotzdem prioritär.

Häufige Ursachen sind dünne Inhalte, doppelte Seitentitel, widersprüchliche Canonicals und Weiterleitungsschleifen. Eine Übersicht der Nicht-Indexierungsgründe und ihrer Bedeutung liefert das Ryte-Wiki zur Indexierung.

Ein weiterer Kandidat sind weiche Fehlerseiten. Sie antworten mit Status 200, zeigen aber nur einen Hinweis wie 'Artikel nicht gefunden'. Suchen Sie solche Seiten im Bericht und liefern Sie echten Inhalt oder einen sauberen 404-Status nach.

Canonicals verdienen besondere Aufmerksamkeit. Jede indexierbare Seite sollte auf sich selbst verweisen, und die kanonische Adresse muss mit Status 200 antworten. Zeigt sie auf eine Weiterleitung oder eine Fehlerseite, verpufft das Signal.

Nach einer Korrektur dauert die Neubewertung Tage bis Wochen. Planen Sie Nachkontrollen ein, statt sofort Ergebnisse zu erwarten. Ein erneutes Crawling einzelner Adressen lässt sich im URL-Prüftool anstoßen, das Indexstatus, Crawling und gerendertes HTML anzeigt.

Interne Verlinkung und Seitenarchitektur

Interne Links sind der Hebel, den Sie vollständig kontrollieren. Sie verteilen Autorität innerhalb der Domain und steuern, welche Adressen ein Crawler in welcher Reihenfolge findet. Wichtige Seiten gehören in die Hauptnavigation.

Linktypen und ihre Wirkung

Linktyp

Hauptnavigation
Wichtige Seiten zuerst
Breadcrumbs
Struktur und zusätzliche Verweise
Sitewide-Links
Geringer Effekt pro Link
Kontextlinks
Stärker, thematisch passend

Wirkung

Hauptnavigation
Breadcrumbs
Sitewide-Links
Kontextlinks

Die Klick-Tiefe sollte flach bleiben. Jede relevante Adresse sollte über höchstens drei Klicks von der Startseite erreichbar sein. Verwaiste Seiten ohne eingehenden internen Verweis findet ein Crawler nur über die Sitemap, wenn überhaupt.

Ankertexte benennen das Ziel. Ein Link mit dem Text 'mehr erfahren' erklärt weder Nutzer noch Maschine, worum es auf der Zielseite geht. Verwenden Sie beschreibende Begriffe und variieren Sie sie, statt denselben Text zu wiederholen.

Breadcrumbs strukturieren Kategorien, liefern zusätzliche Verweise und erscheinen in Suchergebnissen als Pfad. Achten Sie darauf, dass Kategorieseiten nicht durch Facetten in beliebig viele Varianten ausfransen.

Sitewide-Links in Footer und Sidebar geben jeder Seite zahlreiche Verweise. Der Effekt pro Link ist gering. Setzen Sie sie sparsam ein und beschränken Sie die Hauptnavigation auf die wichtigsten Einstiegspunkte.

Kontextlinks im Fließtext wirken stärker als Navigationslinks, weil sie thematisch passen. Verweisen Sie aus einem Absatz auf verwandte Seiten mit einem Satz, der den Nutzen nennt. So entstehen Themencluster statt loser Einzelseiten.

Bündeln Sie Inhalte um ein Oberthema. Eine Übersichtsseite verlinkt auf die Detailseiten, jede Detailseite verlinkt zurück und auf zwei Nachbarn. Diese Struktur verteilt Autorität gleichmäßig und gibt Crawlern klare Pfade.

Prüfen Sie die interne Verlinkung regelmäßig mit einem Crawler. Werkzeuge wie Screaming Frog oder Sitebulb zeigen Klick-Tiefe, verwaiste Adressen und Weiterleitungsketten in einer Liste. Planen Sie einen Lauf nach jedem größeren Relaunch ein.

Sitemap, URL-Einreichung und Signale an Suchmaschinen

Eine XML-Sitemap ist kein Rankingfaktor, sondern ein Entdeckungswerkzeug. Sie listet alle Adressen, die indexiert werden sollen, und kann ein Datum der letzten Änderung mitliefern. Verweisen Sie in der robots.txt auf ihren Speicherort.

Sitemap-Grenzen

  • 50.000URLs pro Sitemap-Datei
  • 50 MBMaximale Dateigröße unkomprimiert

Trennen Sie Sitemaps nach Seitentyp, etwa Seiten, Kategorien, Produkte und Bilder. Pro Datei gelten 50.000 URLs und 50 Megabyte unkomprimiert. Bei größeren Mengen hilft eine Sitemap-Indexdatei, die auf mehrere Sitemaps verweist.

Für Nachrichten und Videoinhalte gibt es eigene Sitemap-Formate. Sie liefern zusätzliche Angaben wie Veröffentlichungsdatum oder Laufzeit. Sinnvoll sind sie nur, wenn die Formate tatsächlich gepflegt werden.

Die Search Console zeigt je Sitemap, wie viele Adressen eingelesen wurden. Eine Differenz zwischen eingelesenen und indexierten URLs ist normal und kein Fehler. Entscheidend ist, dass keine wichtigen Adressen fehlen.

Für Bing lässt sich eine einzelne Adresse zur schnelleren Prüfung einreichen. Das hilft nach Änderungen an zentralen Seiten, ersetzt aber keine saubere Struktur. Die Einreichung von URLs zur schnelleren Indexierung bei Bing erfolgt über die Webmaster Tools.

Bei großen Websites mit häufigen Änderungen lohnt das Protokoll IndexNow. Es meldet geänderte Adressen gebündelt an teilnehmende Suchmaschinen. Ein Skript, das beim Veröffentlichen automatisch eine Anfrage sendet, spart manuelle Einreichungen.

Prüfen Sie zum Schluss, ob alle Sitemap-Adressen indexierbar sind. URLs mit noindex, Weiterleitungen oder Status 404 gehören nicht in die Datei. Solche Einträge kosten nur Crawl-Zeit und verwässern den Bericht.

Content-Qualität und Suchintention

Technische Sauberkeit allein bringt keine Besucher. Entscheidend ist, ob eine Seite die Frage hinter der Suchanfrage beantwortet. Bestimmen Sie vor dem Schreiben, ob die Absicht informierend, vergleichend, navigierend oder kaufbezogen ist.

Ein Absatz, ein Gedanke. Zwischenüberschriften gliedern lange Texte, kurze Sätze bleiben lesbar. Wer eine Anleitung verspricht, liefert Schritte und keine allgemeine Einführung über die Bedeutung des Themas.

Dünne Seiten mit wenigen Sätzen und ohne eigenen Wert konkurrieren schlecht um Indexplätze. Bündeln Sie verwandte Inhalte auf einer starken Seite oder streichen Sie sie. Zwei Seiten für dieselbe Absicht erzeugen Kannibalisierung und schwächen beide.

Aktualität zählt mit. Pflegen Sie Datumsangaben, korrigieren Sie veraltete Preise und Normen, ergänzen Sie neue Entwicklungen. Angaben, die seit Jahren unverändert dastehen, verlieren an Glaubwürdigkeit.

Google bewertet Inhalte nach Erfahrung, Fachwissen, Autorität und Vertrauenswürdigkeit. Sichtbare Autorenangaben, ein vollständiges Impressum und nachvollziehbare Quellen unterstützen diese Einschätzung. Wer Fachthemen behandelt, sollte die eigene Rolle klar benennen.

Titel und Meta-Beschreibung entscheiden über die Klickrate im Suchergebnis. Formulieren Sie den Nutzen in den ersten 60 Zeichen des Titels. Die Beschreibung liefert den Grund zum Klick, sie ist keine Zusammenfassung des Textes.

Strukturierte Daten helfen Suchmaschinen, Inhalte einzuordnen. FAQ-, Artikel- und Produktauszeichnungen können zu erweiterten Suchergebnissen führen. Ein Rich-Ergebnis ist kein garantierter Platz, sondern eine Chance.

Für die Themenfindung reicht eine Liste mit Suchanfragen nicht aus. Prüfen Sie Suchvolumen, Wettbewerb und die Aktualität der bestehenden Treffer. Wenn die ersten Ergebnisse alle dasselbe Grundlagenwissen liefern, fehlt oft die konkrete Anleitung für Fortgeschrittene.

Werkzeuge: Search Console, Bing Webmaster Tools und URL-Prüftool

Die Google Search Console ist die zentrale Datenquelle für Suchanfragen und Seitenleistung. Der Bericht zur Suchleistung zeigt Impressionen, Klicks, Klickrate und durchschnittliche Position je Suchanfrage. Dort erkennen Sie, welche Seiten kurz vor einem besseren Ranking stehen. Die Search Console zur Analyse von Suchanfragen und Seitenleistung bündelt diese Auswertungen in einem Konto.

Die Bing Webmaster Tools bieten vergleichbare Funktionen für die Bing-Suche. Sie umfassen Indexdiagnose, Suchanfragen, Sitemap-Verwaltung und Empfehlungen. Ein Import aus der Search Console verkürzt die Einrichtung deutlich. Einen Überblick über die Funktionen der Bing Webmaster Tools gibt die offizielle Hilfe.

Das URL-Prüftool ist das Werkzeug für Einzelfälle. Es zeigt Indexstatus, Crawling und gerendertes HTML einer einzelnen Adresse. Damit prüfen Sie nach einer Änderung, ob die neue Fassung tatsächlich angekommen ist.

Werkzeug / Wofür es gedacht ist

Google Search Console
Indexabdeckung, Suchanfragen, Core Web Vitals, Sitemap-Status
Bing Webmaster Tools
Indexdiagnose und Sitemaps für die Bing-Suche
URL-Prüftool
Einzelne Adresse auf Indexstatus, Crawling und HTML prüfen
XML-Sitemap
Alle indexierbaren URLs an Suchmaschinen melden

Kein Werkzeug ersetzt die andere Perspektive. Search Console und Bing Webmaster Tools liefern Daten der Suchmaschinen, ein eigener Crawler zeigt die Website aus Nutzersicht. Nutzen Sie beide, um Widersprüche zu erkennen.

Priorisierung mit einer Beispielrechnung

Nutzen Sie Zahlen statt Eindrücke. Notieren Sie für die wichtigsten Landingpages Impressionen, Klicks, Klickrate und Position der letzten drei Monate. Daraus ergibt sich, wo eine Änderung am meisten bewirken kann.

Beispielrechnung Klickpotenzial

96 Klicks pro Monat

12.000 Impressionen, Klickrate 1,8 % = 216 Klicks

Klickrate 2,6 % = 312 Klicks

Differenz: 96 Klicks, keine Prognose

Beispielrechnung: Eine Landingpage erhält 12.000 Impressionen pro Monat bei einer Klickrate von 1,8 Prozent. Das sind 216 Klicks. Verbessern Sie Titel und Snippet so, dass die Klickrate auf 2,6 Prozent steigt, entstehen rechnerisch 312 Klicks. Die Differenz liegt bei 96 Klicks pro Monat. Das ist eine Beispielrechnung, keine Prognose.

Die Reihenfolge der Arbeit folgt dem Verhältnis von Aufwand und Wirkung:

Priorisierung mit Beispielrechnung

  1. Indexierungsfehler auf umsatzrelevanten Seiten beheben.
  2. Interne Links auf starke, aber schlecht verlinkte Seiten setzen.
  3. Titel und Meta-Beschreibungen der zehn wichtigsten Suchanfragen überarbeiten.
  4. Sitemaps und Canonicals konsistent halten.
  5. Dünne Inhalte bündeln oder entfernen.

Kontrollieren Sie nach vier Wochen, ob sich die Kennzahlen bewegt haben. Bleibt eine Maßnahme ohne Wirkung, prüfen Sie die Ursache, statt weiter nachzusteuern. Manchmal liegt das Problem in einem anderen Schritt der Kette.

Monatscheck für die Auffindbarkeit

Monatscheck Auffindbarkeit

  • Seitenindexierungsbericht auf neue Fehlergruppen prüfen
  • Sitemaps in beiden Webmaster-Tools prüfen
  • Auffällige Rückgänge bei Impressionen zuordnen
  • Neue Inhalte intern verlinken
  • Weiterleitungen und Statuscodes testen

Externe Unterstützung: wann eine Agentur hilft

Nicht jede Aufgabe erfordert eine Agentur. Technische Basisarbeit, Sitemap-Pflege und Textüberarbeitungen lassen sich intern erledigen, wenn Zeit und Zugriff auf das Redaktionssystem vorhanden sind.

Ein Vergleich lohnt bei Migrationen, bei Wettbewerbsanalysen oder wenn die interne Kapazität dauerhaft fehlt. Der BVDW veröffentlicht Hinweise zu Kosten und Leistungen von SEO-Agenturen im Vergleich zu Inhouse-Leistungen.

Klären Sie vor der Vergabe, welche Zugänge nötig sind und wie gemessen wird. Vereinbaren Sie Kennzahlen, die Sie selbst im Bericht nachvollziehen können. Die Kontrolle über Search Console und Bing Webmaster Tools bleibt beim Website-Betreiber.

Häufige Fragen

Wie lange dauert es, bis eine neue Seite indexiert wird?

Stunden bis Wochen. Bekannte Domains und gute interne Verlinkung beschleunigen die Aufnahme, Sitemap und URL-Einreichung helfen zusätzlich. Prüfen Sie den Status nach einigen Tagen im Seitenindexierungsbericht.

Reicht eine XML-Sitemap für die Auffindbarkeit?

Nein. Sie hilft bei der Entdeckung, ersetzt aber weder interne Links noch Inhaltsqualität. Eine Adresse in der Sitemap ist kein Auftrag zur Indexierung.

Was ist der Unterschied zwischen Crawling und Indexierung?

Crawling ist der Abruf einer URL durch einen Bot. Indexierung ist die Aufnahme in den Suchindex nach einer Bewertung. Eine gecrawlte Seite kann trotzdem draußen bleiben.

Sollte ich URLs manuell zur Indexierung einreichen?

Für einzelne wichtige Änderungen ja. Bei großen Mengen ist das kein Ersatz für eine saubere Struktur. Sitemap, interne Links und IndexNow skalieren besser.

Warum verschwinden Seiten aus dem Index?

Ursachen sind häufig noindex-Werte, Canonical-Konflikte, dünne Inhalte oder Serverfehler. Der Seitenindexierungsbericht nennt den Grund je Adresse.

In diesem Leitfaden

  1. Auffindbarkeit verbessern: Google Search Console oder Bing Webmaster Tools im VergleichGoogle Search Console und Bing Webmaster Tools im Vergleich: Indexabdeckung, Leistungsdaten, URL-Prüfung, API-Zugang und die Unterschiede der Datenbasis.
  2. Auffindbarkeit verbessern: Kosten für SEO-Agentur oder Inhouse im VergleichKosten SEO-Agentur oder Inhouse-SEO im Vergleich: Stundensätze von 80 bis 200 Euro, Monatspauschalen und Jahresgehälter mit Quellen von BVDW und Statista.
  3. Auffindbarkeit prüfen: Links, Sitemap, URL-Prüftool und IndexstatusSuchmaschinen-Sichtbarkeit prüfen: Checkliste zu internen Links, Sitemap, URL-Prüftool, Indexstatus und den passenden Funktionen in der Google Search Console.

Mehr aus Auffindbarkeit