SEO-Tools für die gesamte Website: Was eine site-weite Analyse leistet
Was ein Crawler über die ganze Domain prüft: Abdeckung, Indexierung, interne Links, Duplikate, Statuscodes und Ladezeiten. Und wo der Einzelseiten-Check endet.
SEO-Tools für die gesamte Website unterscheiden sich von allen anderen Werkzeugen in einem einzigen Punkt: Sie arbeiten nicht mit einer URL als Eingabe, sondern mit einer Domain. Statt eine Seite zu bewerten, folgen sie den Links von der Startseite aus durch das komplette Projekt und legen für jede gefundene URL einen Datensatz an. Erst dadurch entstehen Aussagen, die auf Seitenebene gar nicht formulierbar sind: dass 340 von 1.200 Seiten nie verlinkt werden, dass zwei Kategoriezweige dieselben Texte ausliefern, dass eine Weiterleitungskette über vier Stationen läuft. Dieser Text beschreibt, welche Dimensionen eine site-weite Analyse abdeckt, wo ihre Grenzen zum Einzelseiten-Check und zur Offpage-Analyse verlaufen und wie sich die Auswahl eines Werkzeugs an der Größe der Website und der zu prüfenden Dimension ausrichten lässt.
Was “site-weit” technisch bedeutet
Ein site-weites Tool ist im Kern ein Crawler mit angeschlossener Datenbank. Es startet bei einer oder mehreren Einstiegs-URLs, lädt das HTML, extrahiert alle Links, Bilder, Skripte und Stylesheets, stellt die gefundenen internen Adressen in eine Warteschlange und wiederholt den Vorgang, bis nichts Neues mehr dazukommt. Was am Ende in der Datenbank liegt, ist eine Kopie der Struktur: jede URL mit Statuscode, Titel, Meta-Beschreibung, Überschriftenebenen, Antwortzeit, Wortzahl, eingehenden und ausgehenden internen Links.
Der eigentliche Wert entsteht in der Auswertung dieser Tabelle, nicht im Crawl selbst. Ein Statuscode 404 ist für sich genommen belanglos. Die Information, dass 87 interne Links auf diese eine tote Adresse zeigen und alle aus einem Footer-Modul stammen, ist eine Arbeitsanweisung. Genau diese Verknüpfung von Einzelbefund und Verbreitung über die Site ist das, was ein Werkzeug dieser Klasse leistet und ein URL-basierter Check strukturell nicht leisten kann.
Screaming Frog SEO Spider wird sowohl von OMR als auch von Löwenstark als eigenständiges Tool in ihren Übersichten geführt und steht damit stellvertretend für die Klasse der Desktop-Crawler, die genau nach diesem Prinzip arbeiten. Es geht hier nicht um dieses Produkt, sondern um die Bauart: lokal laufender Crawler, eigene Datenhaltung, Auswertung über Filter und Exporte.
Die Dimensionen einer site-weiten Prüfung
Crawl-Abdeckung
Die erste Frage lautet, welche Seiten ein Crawler überhaupt erreicht. Die Differenz zwischen der Zahl der Seiten, die das Content-Management-System vorhält, und der Zahl der Seiten, die ein Crawl findet, ist eine der aussagekräftigsten Kennzahlen überhaupt. Seiten, die nur über eine Suchfunktion, ein Formular oder ein per JavaScript nachgeladenes Menü erreichbar sind, taugen im Crawl nicht auf. Für Suchmaschinen gilt in vielen Fällen dasselbe. Ergänzend prüfen Tools dieser Klasse, welche URLs in der Sitemap stehen, aber im Crawl fehlen, und umgekehrt.
Indexierung
Erreichbarkeit und Indexierung sind zwei verschiedene Zustände. Ein Tool liest dazu die Robots-Anweisungen, das Meta-Robots-Tag, den X-Robots-Tag im HTTP-Header und das Canonical-Ziel jeder Seite aus und stellt sie gegeneinander. Typische Befunde sind Seiten, die per Canonical auf eine andere Seite zeigen und gleichzeitig in der Sitemap stehen, oder ganze Verzeichnisse, die seit einem Relaunch auf noindex stehen, ohne dass es jemandem aufgefallen wäre. Google Search Console wird in der OMR-Liste der besten SEO-Tools als eines von acht Tools genannt und liefert für diese Dimension die Gegenprobe aus Sicht der Suchmaschine, also den tatsächlichen Indexstatus, den kein Crawler von außen ermitteln kann.
Interne Struktur und Verlinkung
Aus den gesammelten Links entsteht ein Graph. Daraus lassen sich Klicktiefe je URL, Zahl der eingehenden internen Links, verwaiste Seiten ohne jeden internen Eingang und die Verteilung der Ankertexte ableiten. Seobility gliedert seine Analyse einer Website unter anderem in den Bereich Seitenstruktur und Verlinkung und macht damit sichtbar, dass diese Dimension als eigener Prüfblock geführt wird und nicht als Nebenaspekt der Inhaltsbewertung.
Site-weite Duplikate
Doppelte Inhalte sind per Definition kein Einzelseitenproblem. Ein Tool bildet dafür Prüfsummen oder Ähnlichkeitswerte über Titel, Meta-Beschreibungen, Überschriften und Fließtext und gruppiert Seiten, deren Werte zu nah beieinanderliegen. Häufige Ursachen sind Parameter-URLs mit identischem Inhalt, Paginierungen, Druckansichten, Filterkombinationen in Shops und Standortseiten, die sich nur im Ortsnamen unterscheiden. Erkennbar wird das erst im Vergleich aller URLs miteinander.
Statuscodes und Weiterleitungen
Für jede gefundene Adresse hält das Tool den HTTP-Statuscode fest und löst Weiterleitungen bis zum Ziel auf. Interessant sind dabei weniger die einzelnen Fehler als die Muster: Ketten mit mehreren Zwischenschritten, Weiterleitungen, die auf einer Fehlerseite enden, Schleifen, sowie interne Links, die noch auf die alte Adressstruktur zeigen, obwohl eine Weiterleitung existiert. Die Kennzahl, auf die es ankommt, ist der Anteil interner Links, die ihr Ziel direkt und mit Status 200 erreichen.
Server- und Ladezeitwerte über alle URLs
Ein site-weites Tool misst Antwortzeit und Antwortgröße für jede einzelne URL. Das ergibt keine tiefe Performance-Diagnose einer Seite, sondern eine Verteilung: Welche Vorlagen sind durchgehend langsam, welches Verzeichnis fällt aus dem Rahmen, ab welcher Parametertiefe steigt die Serverzeit an. Seobility führt Server-Konfiguration als eigenen Analysebereich neben Meta-Angaben, Seitenqualität sowie Seitenstruktur und Verlinkung. SEORCH nennt für seinen kostenlosen Website-Check Page Speed, Core Web Vitals, OnPage, Offpage und Mobile Friendly und zeigt damit, wie eng Performance-Werte und klassische Onpage-Prüfung in dieser Werkzeugklasse beieinanderliegen.
Die Grenze zum Einzelseiten-Check
Ein Einzelseiten-Checker nimmt eine URL entgegen und liefert eine Bewertung dieser einen Seite. Das ist sinnvoll, beantwortet aber eine andere Frage. Die Trennlinie verläuft dort, wo eine Aussage die Kenntnis aller anderer Seiten voraussetzt.
| Frage | Einzelseiten-Check | Site-weites Tool |
|---|---|---|
| Fehlt dieser Seite die Meta-Beschreibung? | ja | ja |
| Auf wie vielen Seiten fehlt sie? | nein | ja |
| Ist der Titel dieser Seite zu lang? | ja | ja |
| Welche Seiten haben denselben Titel? | nein | ja |
| Ist diese Seite erreichbar? | ja | ja |
| Welche Seiten sind von keiner anderen aus erreichbar? | nein | ja |
| Wie schnell antwortet diese Seite? | ja | ja |
| Welche Vorlage ist durchgehend langsam? | nein | ja |
Die rechte Spalte enthält ausschließlich Fragen, deren Antwort aus dem Verhältnis zwischen Seiten entsteht. Wer sie stellen will, braucht einen Crawl. Wer sie nicht stellt, kommt mit einem Seiten-Check aus.
Die Grenze zur Offpage-Analyse
Ein Crawler sieht nur, was die eigene Website ausliefert. Alles, was außerhalb der Domain passiert, liegt außerhalb seines Zugriffs: eingehende Links von fremden Seiten, Erwähnungen, Sichtbarkeit im Wettbewerbsumfeld, Rankingpositionen. Diese Daten stammen aus fremden Indizes und werden von Anbietern erhoben, die selbst das Web crawlen oder Suchergebnisse abfragen.
Die Trennung spiegelt sich in den gängigen Kategorisierungen wider. Löwenstark ordnet SEO-Tools in Keyword-Beobachtung, Onpage-Analyse, Ranking-Überwachung, Backlink-Analyse, WDF*IDF-Tool und Snippet-Generator ein. SE Ranking gliedert in seinem Vergleich von 15 SEO-Tools für 2026 unter anderem nach All-in-One-, technischen SEO-, Content-, Keyword-Recherche-, Rank-Tracking-, Local-SEO- und AI-Visibility-Tools. In beiden Einteilungen ist die site-weite technische Analyse genau eine Kategorie unter mehreren. Das ist der praktische Hinweis: Ein Crawler ersetzt kein Rank-Tracking und keine Backlink-Datenbank, und umgekehrt ersetzen diese keinen Crawl.
Auswahl entlang der Site-Größe
Die Größe der Website entscheidet mehr über die Werkzeugwahl als jede Funktionsliste, weil sie bestimmt, ob ein Crawl überhaupt in vertretbarer Zeit und ohne Last auf dem Server durchläuft.
| Größenordnung | Was praktisch wichtig wird |
|---|---|
| bis etwa 500 URLs | Crawl läuft in Minuten durch, jede Auffälligkeit lässt sich manuell nachsehen, Grenzen kostenloser Zugänge stören selten |
| etwa 500 bis 10.000 URLs | Filter, Segmentierung nach Verzeichnis und Exporte werden zur Grundfunktion, Duplikatserkennung liefert erst hier belastbare Gruppen |
| etwa 10.000 bis 100.000 URLs | Crawl-Konfiguration entscheidet über Machbarkeit: Ausschluss von Parametern, Begrenzung der Klicktiefe, Drosselung der Anfragerate |
| über 100.000 URLs | Speicherhaltung und Wiederholbarkeit stehen im Vordergrund, Stichproben je Vorlage ersetzen oft den Vollcrawl |
Ein zweiter Faktor kommt hinzu: Ob die Seiten serverseitig ausgeliefert werden oder erst im Browser durch JavaScript entstehen. Im zweiten Fall muss der Crawler die Seiten rendern, was den Durchlauf um ein Vielfaches verlangsamt und die praktisch erreichbare Obergrenze deutlich senkt.
Bei den Zugangsmodellen lohnt ein nüchterner Blick auf die tatsächlichen Limits statt auf die Bezeichnung. SEOlytics ist laut Dr. DSGVO für eine Domain kostenlos nutzbar und prüft dabei bis zu 20 Keywords. Solche Zahlen sind der eigentliche Auswahlparameter, nicht das Etikett kostenlos oder kostenpflichtig.
Auswahl entlang der zu prüfenden Dimension
Die zweite Auswahlachse ist die Frage, die beantwortet werden soll. Jede Dimension hat eine Datenquelle, aus der sie zwingend stammen muss.
| Dimension | Notwendige Datenquelle |
|---|---|
| Crawl-Abdeckung, verwaiste Seiten | eigener Crawl der Domain |
| Indexstatus, tatsächliche Suchanfragen | Datenquelle der Suchmaschine selbst |
| Duplikate über die Site | Vergleich aller gecrawlten Inhalte untereinander |
| Statuscodes, Weiterleitungsketten | eigener Crawl mit aufgelösten Zielen |
| Serverzeiten je Vorlage | Crawl mit Zeitmessung je URL |
| eingehende Links von fremden Domains | externer Linkindex |
| Rankingverlauf | wiederholte Abfrage der Suchergebnisse |
Praktisch bedeutet das: Wer wissen will, warum Seiten nicht im Index sind, braucht mindestens zwei Quellen, den eigenen Crawl und die Sicht der Suchmaschine. Kein einzelnes Werkzeug beantwortet diese Frage allein.
Warum die Werkzeugsuche selbst unübersichtlich wirkt
Ein Blick auf das Suchverhalten erklärt, warum die Recherche nach einem passenden Werkzeug so schwerfällt. Die Suchanfrage seo tools site kommt laut DataForSEO-Keyworddaten vom 7. August 2026 auf 170 Suchanfragen pro Monat bei einem CPC von 14,84 Euro und einer Difficulty von 20. Der Markenbegriff seobility erreicht im selben Datenstand 6.600 Suchanfragen pro Monat bei Difficulty 8, der generische Begriff seo checker 5.400 bei Difficulty 69.
Daraus lässt sich ein Muster ablesen: Der Suchraum wird von Markennamen und von generischen Checker-Begriffen dominiert, während die präzise formulierte Frage nach einem site-weiten Werkzeug ein vergleichsweise kleines Volumen hat. Wer allgemein sucht, landet deshalb überwiegend bei Angeboten, die eine URL entgegennehmen und eine Note ausgeben. Das ist eine andere Werkzeugklasse als die hier beschriebene, und die Verwechslung der beiden ist der häufigste Grund dafür, dass eine Analyse an der eigentlichen Frage vorbeigeht.
Ein Ablauf für die erste site-weite Analyse
- Umfang festlegen. Startadresse, einbezogene Subdomains, Umgang mit Parametern und maximale Klicktiefe vorab bestimmen. Ohne diese Festlegung crawlt das Werkzeug Filterkombinationen, die niemanden interessieren.
- Referenzcrawl anlegen. Den ersten vollständigen Durchlauf speichern. Er ist der Bezugspunkt, gegen den alle späteren Läufe verglichen werden.
- Inventar abgleichen. Zahl der gecrawlten URLs gegen die Zahl im Content-Management-System und gegen die Sitemap stellen. Jede Differenz benennen.
- Statuscodes und Weiterleitungen bereinigen. Zuerst die Muster mit hoher Verbreitung, also Links aus Vorlagen, Menüs und Footern.
- Verwaiste Seiten und Klicktiefe prüfen. Seiten ohne internen Eingang entweder anbinden oder bewusst entfernen.
- Duplikatgruppen sichten. Prüfen, ob die Gruppen echte Dubletten sind oder ob die Vorlage die Unterscheidungsmerkmale nur nicht sichtbar macht.
- Serverzeiten je Verzeichnis auswerten. Ausreißer nach Vorlage sortieren, nicht nach Einzelseite.
- Crawl wiederholen. Erst der Vergleich zweier Läufe zeigt, ob eine Maßnahme gewirkt hat.
Der letzte Punkt ist der wichtigste und wird am häufigsten ausgelassen. Eine einmalige Analyse liefert eine Liste. Zwei Analysen im Abstand liefern eine Wirkungsmessung, und nur die beantwortet die Frage, ob sich die Arbeit gelohnt hat.
Was ein site-weites Tool nicht leistet
Ein Crawler stellt fest, dass eine Seite dünn ist, ein Titel doppelt vorkommt oder eine Weiterleitung ins Leere führt. Er entscheidet nicht, ob eine Seite existieren sollte, welche von zwei ähnlichen Seiten bestehen bleibt oder ob ein Thema überhaupt Nachfrage hat. Diese Entscheidungen setzen Kenntnis des Geschäftsmodells und der Suchnachfrage voraus. Ein Werkzeug dieser Klasse verkürzt den Weg zur Entscheidung, indem es den Zustand vollständig und wiederholbar sichtbar macht. Die Entscheidung selbst bleibt eine redaktionelle.
