Screaming Frog

Screaming Frog SEO Spider ist ein professionelles Desktop-Tool für die technische SEO-Analyse. Es crawlt eine Website ähnlich wie ein Suchmaschinen-Bot, folgt den Links und sammelt zu jeder URL technische Daten. Damit deckt es typische Probleme auf: defekte Links, Redirect-Ketten, fehlende oder doppelte Meta-Daten, falsch gesetzte Canonical-Tags, fehlende Alt-Texte, Probleme mit strukturierten Daten und Hreflang sowie schwach verlinkte Seiten. Es eignet sich für Websites jeder Größe und ist ein Standardwerkzeug für technische SEO-Audits.

Beides. Die kostenlose Version erlaubt das Crawlen von bis zu 500 URLs pro Crawl und eignet sich für kleinere Websites oder erste Tests. Die Lizenz-Version kostet aktuell rund 279 US-Dollar pro Jahr (Stand 2026, 1 bis 4 Lizenzen); der Euro- oder Pfund-Betrag richtet sich nach der gewählten Währung, den tagesaktuellen Preis nennt die offizielle Website. Eine Lizenz gilt jeweils für ein Jahr und einen Nutzer und schaltet unbegrenztes Crawling sowie erweiterte Funktionen frei. Für professionelle, regelmäßige SEO-Arbeit ist die Lizenz praktisch unverzichtbar.

Crawlen Sie zunächst Ihre Website und wechseln Sie dann in den Bereich „Response Codes“. Dort filtern Sie auf „Client Error (4xx)“ und sehen alle 404-Fehler. Die Spalte „Inlinks“ zeigt, von welchen Seiten auf die jeweils defekte URL verlinkt wird. Exportieren Sie die Liste als CSV und richten Sie für die wichtigen Fälle 301-Weiterleitungen auf passende Alternativseiten ein. Priorisieren Sie dabei 404-Fehler mit vielen eingehenden Links oder externen Backlinks, da diese am stärksten ins Gewicht fallen.

Screaming Frog identifiziert eine breite Palette technischer Probleme: defekte interne und externe Links (404), Redirect-Ketten und -Schleifen, fehlende oder doppelte Title-Tags und Meta-Descriptions, zu lange Titel, falsch gesetzte oder fehlende Canonical-Tags, fehlende Alt-Texte bei Bildern, Fehler in strukturierten Daten, Hreflang-Probleme bei mehrsprachigen Seiten sowie verwaiste oder zu tief vergrabene Seiten in der internen Linkstruktur. Über API-Integrationen lassen sich diese Daten zusätzlich mit Traffic- und Performance-Werten anreichern.

Für die laufende SEO-Pflege empfiehlt sich ein regelmäßiger Crawl, etwa monatlich, um technische Probleme früh zu erkennen. Zusätzlich lohnt sich ein Crawl nach größeren Änderungen: nach einem Relaunch, einem Theme- oder System-Wechsel, nach Updates wichtiger Plugins oder Erweiterungen sowie vor und nach umfangreichen Content-Überarbeitungen. Speichern Sie jeden Crawl mit Datum, damit Sie Entwicklungen über die Zeit nachvollziehen und mit der Vergleichsfunktion frühere und aktuelle Stände gegenüberstellen können.

Screaming Frog SEO Spider ist eine Java-basierte Desktop-Anwendung und steht für Windows, macOS und Linux zur Verfügung. Sie installieren das Programm lokal auf Ihrem Rechner, es handelt sich nicht um ein Cloud-Tool. Da es ressourcenintensiv ist, profitiert es von ausreichend Arbeitsspeicher; für sehr große Websites empfiehlt sich der Datenbank-Speichermodus, der die Daten auf die Festplatte auslagert und den Arbeitsspeicher entlastet. Den passenden Download für Ihr Betriebssystem finden Sie auf der offiziellen Website.

Nein, das ist nicht der Fokus. Screaming Frog ist ein Crawler für technische und On-Page-Daten der eigenen Website, nicht für Keyword-Rankings oder Backlink-Profile. Es sagt Ihnen nicht, für welche Keywords eine Seite rankt oder wer auf Sie verlinkt. Für solche Daten benötigen Sie andere Werkzeuge wie Ahrefs, Semrush oder Sistrix. Über die API-Integration kann Screaming Frog allerdings Klick- und Impressionsdaten aus der Google Search Console sowie Link-Metriken einbinden und neben die technischen Crawl-Daten stellen.

In der kostenlosen Version sind es bis zu 500 URLs pro Crawl. Die Lizenz hebt dieses Limit auf, sodass theoretisch unbegrenzt gecrawlt werden kann. In der Praxis hängt die maximale Zahl vom zugewiesenen Arbeitsspeicher und Speicherplatz ab. Bei kleinen und mittleren Websites genügt der Standard-Modus problemlos. Für sehr große Seiten mit vielen tausend URLs sollten Sie mehr Arbeitsspeicher zuweisen und den Datenbank-Speichermodus aktivieren, der die Crawl-Daten auf die Festplatte schreibt und so deutlich größere Crawls ermöglicht.

Custom Extraction ist eine Funktion der Lizenz-Version, mit der sich beliebige Inhalte aus dem HTML einer Seite auslesen lassen, die Screaming Frog standardmäßig nicht erfasst. Sie definieren dazu Regeln per XPath, CSS-Selektor oder regulärem Ausdruck und der Crawler extrahiert die passenden Werte für jede URL. Typische Anwendungen sind das Auslesen von Preisen, Autorennamen, Veröffentlichungsdaten, Kategorien oder bestimmten Schema-Feldern. So lässt sich der Crawl flexibel an individuelle Analysefragen anpassen, ohne jede Seite einzeln prüfen zu müssen.

Nein. JavaScript-Rendering ist nur dann nötig, wenn Inhalte erst per JavaScript geladen werden, etwa bei modernen Single-Page-Anwendungen oder bestimmten Page-Buildern. Das Rendering verlangsamt den Crawl deutlich und benötigt spürbar mehr Systemressourcen. Bei klassischen, serverseitig ausgelieferten Seiten bringt es keinen Vorteil und kostet nur Zeit. Aktivieren Sie es also gezielt, wenn Sie wissen oder vermuten, dass wichtige Inhalte oder Links ohne JavaScript fehlen, und crawlen Sie ansonsten ohne Rendering.

Nicht automatisch. Viele Systeme erzeugen absichtlich ähnliche Seiten, etwa Archive, Filter- oder Paginierungsseiten. Solange Canonical-Tags korrekt auf die Hauptversion verweisen, ist das in der Regel unkritisch. Eine eigene „Duplicate-Content-Strafe{C} von Google gibt es nicht: Google fasst sehr ähnliche Seiten zusammen und wählt eine kanonische Version aus. Screaming Frog markiert auch sogenannte Near-Duplicates, die sich nur geringfügig unterscheiden. Prüfen Sie solche Treffer im Kontext, statt jeden als Fehler zu werten, und achten Sie vor allem auf saubere Canonical-Auszeichnung.