Screaming Frog

Was ist Screaming Frog?

Screaming Frog SEO Spider ist ein professionelles Desktop-Tool für die technische SEO-Analyse, das von der britischen Agentur Screaming Frog Ltd. entwickelt wurde. Die Software simuliert das Verhalten von Suchmaschinen-Crawlern und durchsucht Websites systematisch, um technische Probleme, SEO-Fehler und Optimierungspotenziale zu identifizieren.

Das Tool wurde erstmals 2010 veröffentlicht und hat sich seitdem zu einem Industriestandard für SEO-Profis entwickelt. Mit über 6 Millionen Downloads weltweit gehört Screaming Frog zu den meistgenutzten SEO-Analyse-Tools. Die Software ist sowohl für Windows, macOS als auch Linux verfügbar und bietet eine kostenlose Version mit eingeschränktem Funktionsumfang sowie eine Lizenzversion für professionelle Anwender.

Hauptfunktionen und Features

Versionen und Preisgestaltung

Kostenlose Version

Die kostenlose Version von Screaming Frog erlaubt das Crawlen von bis zu 500 URLs pro Projekt. Diese Einschränkung macht sie ideal für kleine Websites, einzelne Unterseiten-Analysen oder erste Tests. Alle Grundfunktionen sind verfügbar, jedoch fehlen erweiterte Features wie die API-Integration oder das Speichern von Crawls.

Lizenzierte Version

Die kostenpflichtige Lizenz kostet 209 Euro pro Jahr (Stand 2026) und bietet unbegrenztes Crawling, erweiterte Funktionen, API-Integrationen, das Speichern und Vergleichen von Crawls sowie vorrangigen Support. Für professionelle SEO-Arbeit ist die Lizenzversion praktisch unverzichtbar.

Feature	Kostenlose Version	Lizenzierte Version
Crawl-Limit	500 URLs	Unbegrenzt
Crawl-Speicherung	❌ Nicht verfügbar	✅ Verfügbar
API-Integrationen	❌ Nicht verfügbar	✅ Alle APIs
JavaScript-Rendering	❌ Nicht verfügbar	✅ Verfügbar
Google Analytics Integration	❌ Nicht verfügbar	✅ Verfügbar
Search Console Integration	❌ Nicht verfügbar	✅ Verfügbar
Crawl-Vergleich	❌ Nicht verfügbar	✅ Verfügbar
Preis	Kostenlos	209€/Jahr

Installation und Einrichtung

Systemanforderungen

Screaming Frog ist eine Java-basierte Anwendung und benötigt entsprechende Systemressourcen. Für optimale Performance werden mindestens 8 GB RAM empfohlen, bei größeren Websites (über 100.000 URLs) sollten 16 GB oder mehr zur Verfügung stehen. Die Software läuft auf Windows 7 und höher, macOS 10.13+ und verschiedenen Linux-Distributionen.

Praktische Anwendung für WordPress-Websites

Erste Schritte: Website crawlen

Um Ihre WordPress-Website zu analysieren, geben Sie einfach die Haupt-URL in das Eingabefeld oben ein und klicken auf „Start“. Screaming Frog beginnt nun, alle verlinkten Seiten zu crawlen und zeigt den Fortschritt in Echtzeit an.

Wichtige WordPress-spezifische Analysen

Doppelte Inhalte identifizieren

WordPress generiert automatisch verschiedene Archive, die zu Duplicate Content führen können. Mit Screaming Frog finden Sie unter dem Tab „URI“ → Filter: „Duplicate“ alle URLs mit identischen Inhalten. Besonders häufig sind doppelte Titel und Meta-Descriptions bei Archiv-Seiten.

Kanonisierung überprüfen

Canonical-Tags sind für WordPress-Websites essentiell. Im Tab „Directives“ sehen Sie alle Canonical-Tags und können überprüfen, ob WordPress diese korrekt setzt. Achten Sie besonders auf Paginierungs-Seiten und Archive.

Plugin-generierte Fehler finden

Viele WordPress-Plugins erzeugen zusätzliche URLs oder technische Probleme. Unter „Response Codes“ → „Client Error (4xx)“ finden Sie alle 404-Fehler, die oft durch deaktivierte oder gelöschte Plugins entstehen.

Bildoptimierung analysieren

Im Tab „Images“ zeigt Screaming Frog alle Bilder Ihrer Website mit Dateigröße und Alt-Text. Fehlende Alt-Texte sind ein häufiges Problem in WordPress und können hier schnell identifiziert werden.

Erweiterte WordPress-Analysen

Interne Verlinkungsstruktur optimieren

Eine starke interne Verlinkung ist für WordPress-Websites entscheidend. Im Tab „Internal“ → „All“ sehen Sie alle internen Links. Sortieren Sie nach „Inlinks“ (eingehende Links), um zu identifizieren, welche Seiten die meiste Link-Power erhalten und welche unterverlinkt sind.

XML-Sitemap validieren

WordPress generiert mit Plugins wie Yoast SEO oder RankMath automatisch XML-Sitemaps. Mit Screaming Frog können Sie unter Mode → List die Sitemap-URL eingeben und nur die darin enthaltenen URLs crawlen. Vergleichen Sie das Ergebnis mit einem vollständigen Crawl, um zu prüfen, ob alle wichtigen Seiten in der Sitemap enthalten sind.

Häufige SEO-Probleme mit Screaming Frog aufdecken

Defekte Links (Broken Links)

404-Fehler schaden der Nutzererfahrung und verschwenden Crawl-Budget. Im Tab „Response Codes“ → Filter auf „Client Error (4xx)“ zeigt Screaming Frog alle defekten Links. Die Spalte „Inlinks“ zeigt, von welchen Seiten auf die defekte URL verlinkt wird.

Redirect-Ketten

Mehrfache Weiterleitungen (A → B → C) verlangsamen die Website und verschwenden Crawl-Budget. Im Tab „Response Codes“ → „Redirection (3xx)“ finden Sie alle Redirects. Die Spalte „Redirect URI“ zeigt das Weiterleitungsziel.

Redirect-Ketten identifizieren

Screaming Frog markiert Redirect-Ketten automatisch. Klicken Sie auf eine weiterleitende URL und schauen Sie im unteren Bereich unter „Outlinks“ – wenn dort wieder eine 301/302 erscheint, haben Sie eine Redirect-Kette gefunden.

Fehlende oder doppelte Meta-Daten

Title-Tags und Meta-Descriptions sind fundamentale On-Page-Faktoren. Im Tab „Page Titles“ sehen Sie alle Titel mit Längenangabe. Filter auf „Missing“, „Duplicate“ oder „Over 60 Characters“ zeigen spezifische Probleme.

Problem	Wo zu finden	Empfohlene Aktion
Fehlende Title-Tags	Page Titles → Filter: Missing	Title in WordPress für jede Seite definieren
Doppelte Titles	Page Titles → Filter: Duplicate	Einzigartige Titel für jede Seite erstellen
Zu lange Titles	Page Titles → Filter: Over 60	Auf 50-60 Zeichen kürzen
Fehlende Meta-Descriptions	Meta Description → Filter: Missing	Description für jede wichtige Seite hinzufügen
Doppelte Descriptions	Meta Description → Filter: Duplicate	Einzigartige Descriptions verfassen

Strukturierte Daten (Schema Markup)

Im Tab „Structured Data“ zeigt Screaming Frog alle gefundenen Schema-Markups. WordPress-Plugins wie Yoast oder RankMath fügen automatisch strukturierte Daten hinzu, aber nicht immer fehlerfrei.

Schema-Validierung

Screaming Frog zeigt an, welche Schema-Typen gefunden wurden (Article, Product, FAQ, etc.). Für eine detaillierte Validierung sollten Sie die URLs zusätzlich mit dem Google Rich Results Test überprüfen.

Erweiterte Features für Profis

Custom Extraction

Mit der Custom Extraction können Sie beliebige HTML-Elemente extrahieren. Das ist besonders nützlich für WordPress-spezifische Analysen, wie das Auslesen von Kategorien, Tags oder benutzerdefinierten Feldern.

JavaScript-Rendering

Moderne WordPress-Themes und Page Builder nutzen häufig JavaScript. Mit aktiviertem JavaScript-Rendering (Configuration → Spider → Rendering) sieht Screaming Frog die Website wie ein moderner Browser.

API-Integrationen

Google Analytics Integration

Verbinden Sie Screaming Frog mit Google Analytics, um Traffic-Daten direkt im Crawler zu sehen. So identifizieren Sie schnell, welche Seiten mit technischen Problemen viel Traffic erhalten und priorisieren die Fehlerbehebung.

Google Search Console Integration

Die Search Console Integration zeigt Impressionen, Klicks und durchschnittliche Position für jede URL. Kombiniert mit technischen Daten erhalten Sie ein vollständiges Bild der SEO-Performance.

PageSpeed Insights Integration

Lassen Sie für alle gecrawlten URLs automatisch PageSpeed-Scores abrufen. Das dauert bei großen Sites lange, liefert aber wertvolle Performance-Daten für jede einzelne Seite.

Crawl-Vergleiche

Mit der Lizenz-Version können Sie Crawls speichern und vergleichen. Das ist ideal, um die Auswirkungen von WordPress-Updates, Theme-Wechseln oder Plugin-Änderungen zu überwachen.

Optimale Konfiguration für WordPress-Sites

Crawl-Einstellungen für WordPress

URLs ausschließen

WordPress generiert viele URLs, die für SEO irrelevant sind. Unter Configuration → Exclude können Sie diese ausschließen:

Crawl-Limits setzen

Für große WordPress-Multisites oder WooCommerce-Shops mit tausenden Produkten sollten Sie unter Configuration → Limits die maximale Crawl-Tiefe und URL-Anzahl begrenzen, um Ressourcen zu schonen.

User-Agent für WordPress

Manche WordPress-Sicherheits-Plugins blockieren unbekannte Crawler. Setzen Sie den User-Agent auf „Googlebot“ (Configuration → User-Agent → Googlebot), um sicherzustellen, dass Sie die Website genauso sehen wie Google.

Respektierung von robots.txt

Standardmäßig respektiert Screaming Frog die robots.txt. Das ist gut, um zu testen, ob wichtige Bereiche versehentlich blockiert sind. Für eine vollständige technische Analyse können Sie die Respektierung unter Configuration → Robots.txt → Settings deaktivieren.

Reporting und Datenexport

Vorgefertigte Berichte

Screaming Frog bietet unter Reports verschiedene vorgefertigte Berichte für häufige SEO-Probleme:

Datenexport für WordPress-Workflows

Alle Daten können als CSV, XLSX oder Google Sheets exportiert werden. Für WordPress-Administratoren besonders nützlich:

Export für Redirect-Implementierung

Exportieren Sie alle 404-URLs mit ihren Quell-URLs. Diese Liste kann direkt in WordPress-Redirect-Plugins wie „Redirection“ importiert werden.

Export für Content-Optimierung

Exportieren Sie alle URLs mit fehlenden oder doppelten Meta-Daten zusammen mit Title, Description und URL. Diese Liste können Sie an Content-Verantwortliche weitergeben oder in Excel/Google Sheets bearbeiten.

Bulk-Bearbeitung vorbereiten

Für WordPress-Sites mit vielen Seiten können Sie die Export-Daten nutzen, um Bulk-Updates mit SQL-Queries oder WordPress-CLI durchzuführen.

Screaming Frog vs. Alternative Tools

Vergleich mit anderen Crawlern

Tool	Typ	Hauptvorteil	Preis
Screaming Frog	Desktop	Unbegrenzte Crawls, detaillierte Daten, keine Datenweitergabe	209€/Jahr
Sitebulb	Desktop	Bessere Visualisierungen, automatische Priorisierung	ab 252€/Jahr
OnCrawl	Cloud	Log-File-Analyse, Enterprise-Features	ab 600€/Monat
Ahrefs Site Audit	Cloud	Integriert in Ahrefs-Suite, automatische Überwachung	ab 99$/Monat
Semrush Site Audit	Cloud	Integriert in Semrush-Suite, benutzerfreundlich	ab 120$/Monat

Wann Screaming Frog die beste Wahl ist

Best Practices und Profi-Tipps

Effiziente Workflows für WordPress

Regelmäßige Audits einplanen

Crawlen Sie Ihre WordPress-Website mindestens monatlich, um technische Probleme frühzeitig zu erkennen. Speichern Sie jeden Crawl mit Datum im Dateinamen für spätere Vergleiche.

Fokussierte Teil-Crawls

Statt immer die gesamte Site zu crawlen, nutzen Sie den List-Modus für spezifische Analysen: Crawlen Sie nur Blog-Posts (/blog/), nur Produkte (/shop/) oder nur neue Seiten aus der letzten Woche.

Custom Search für WordPress-Probleme

Nutzen Sie die Search-Funktion mit regulären Ausdrücken, um WordPress-spezifische Probleme zu finden:

Performance-Optimierung

RAM-Zuweisung erhöhen

Für große WordPress-Sites sollten Sie mehr RAM zuweisen. Bearbeiten Sie die Datei „screaming frog.l4j.ini“ (Windows) oder passen Sie die Java-Parameter an:

Datenbank-Modus für riesige Sites

Bei WordPress-Multisites oder großen WooCommerce-Shops mit über 100.000 URLs aktivieren Sie unter Configuration → System → Storage den Database Storage Mode. Das verlagert Daten auf die Festplatte und schont den RAM.

Fehlerdiagnose bei WordPress-Crawl-Problemen

Crawl wird von WordPress blockiert

Wenn Screaming Frog viele 403- oder 429-Fehler meldet, blockiert wahrscheinlich ein Sicherheits-Plugin (Wordfence, iThemes Security) den Crawler. Lösungen:

• User-Agent auf Googlebot ändern
• Eigene IP-Adresse im Sicherheits-Plugin whitelisten
• Crawl-Geschwindigkeit reduzieren (1-2 URLs/Sekunde)
• Temporär Rate Limiting im Plugin deaktivieren

JavaScript-Inhalte werden nicht gecrawlt

WordPress-Page-Builder wie Elementor oder Divi laden Inhalte oft per JavaScript. Aktivieren Sie JavaScript-Rendering und erhöhen Sie das Rendering-Timeout unter Configuration → Spider → Rendering auf 15-20 Sekunden.

Crawl bleibt hängen

Bei endlosen Crawls prüfen Sie:

• Gibt es Parameter-URLs, die unendlich viele Kombinationen erzeugen?
• Erzeugt ein WordPress-Plugin Kalender- oder Archiv-URLs ohne Ende?
• Sind Faceted-Navigation-Filter im WooCommerce-Shop aktiv?

Lösung: Schließen Sie problematische URL-Muster unter Configuration → Exclude aus.

Spezielle WordPress-Szenarien

WooCommerce-Shops analysieren

WooCommerce-Sites haben spezielle Anforderungen. Screaming Frog hilft bei:

Produkt-SEO überprüfen

Exportieren Sie alle Produkt-URLs und prüfen Sie systematisch Title-Tags, Meta-Descriptions, H1-Überschriften und strukturierte Daten (Product Schema). WooCommerce generiert diese oft automatisch, aber nicht immer optimal.

Kategorie-Struktur analysieren

Nutzen Sie die Crawl-Tiefe-Ansicht, um zu sehen, wie viele Klicks Produkte von der Homepage entfernt sind. Idealerweise sollten wichtige Produkte innerhalb von 3 Klicks erreichbar sein.

Out-of-Stock-Seiten finden

Mit Custom Extraction können Sie prüfen, welche Produktseiten „ausverkauft“ anzeigen. Diese sollten eventuell auf noindex gesetzt oder mit Canonical-Tags auf verfügbare Varianten verwiesen werden.

WordPress Multisite

Bei WordPress-Multisite-Installationen können Sie entweder jede Subsite einzeln crawlen oder die gesamte Multisite auf einmal. Für getrennte Analysen nutzen Sie die Include-Funktion, um nur eine Subdomain zu crawlen.

Mehrsprachige WordPress-Sites

Für mehrsprachige WordPress-Sites (WPML, Polylang, MultilingualPress) ist die Hreflang-Analyse essentiell:

Hreflang-Validierung

Im Tab „Hreflang“ zeigt Screaming Frog alle Hreflang-Implementierungen. Achten Sie auf:

• Fehlende Rückverweise (jede Sprachversion muss auf alle anderen verweisen)
• Falsche Sprachcodes (de-DE statt de, en-US statt en)
• Self-referencing Hreflang (jede Seite muss auf sich selbst verweisen)
• Hreflang auf 404- oder weiterleitenden Seiten

Fortgeschrittene Analysetechniken

Log-File-Analyse vorbereiten

Screaming Frog kann mit Server-Logs kombiniert werden, um zu sehen, welche Seiten Google tatsächlich crawlt. Exportieren Sie die URL-Liste aus Screaming Frog und gleichen Sie sie mit Ihren Server-Logs ab (z.B. mit Log-File-Analyzer-Tools).

Crawl-Budget-Optimierung

Für große WordPress-Sites ist Crawl-Budget wichtig. Screaming Frog hilft zu identifizieren:

• Seiten mit vielen Outlinks, die Crawl-Budget verschwenden
• Tief vergrabene wichtige Seiten (hohe Crawl-Tiefe)
• Unwichtige Seiten, die auf noindex gesetzt werden sollten
• Redirect-Ketten, die Crawl-Budget verschwenden

Content-Inventar erstellen

Exportieren Sie alle URLs mit Title, Description, H1, Wortanzahl und Inlinks. Diese Tabelle bildet die Grundlage für Content-Audits und hilft zu entscheiden, welche WordPress-Seiten aktualisiert, zusammengelegt oder gelöscht werden sollten.

Migration-Vorbereitung

Vor einem WordPress-Relaunch oder Domain-Umzug:

Häufige Fehler vermeiden

Typische Anfängerfehler

Interpretation der Daten

Nicht jeder 404 ist ein Problem

404-Fehler für alte, nicht mehr existierende Seiten ohne eingehende Links sind normal und kein SEO-Problem. Priorisieren Sie 404s mit vielen Inlinks oder externen Backlinks.

Duplicate Content ist nicht immer schlecht

WordPress generiert absichtlich Archive mit ähnlichen Inhalten. Solange Canonical-Tags korrekt gesetzt sind, ist das kein Problem. Screaming Frog zeigt auch „near-duplicates“, die sich nur geringfügig unterscheiden – das ist bei Archiven normal.

Crawl-Tiefe richtig interpretieren

Eine hohe Crawl-Tiefe (z.B. Tiefe 8) bedeutet nicht automatisch ein Problem. Wichtig ist, dass wichtige Seiten (mit Traffic, Conversions) eine niedrige Crawl-Tiefe haben.

Screaming Frog in der SEO-Routine

Monatliches WordPress-SEO-Audit

Ein strukturierter monatlicher Prozess mit Screaming Frog:

Integration in WordPress-Workflows

Nach Theme-Wechsel

Crawlen Sie unmittelbar nach einem Theme-Wechsel, um sicherzustellen, dass keine Links verloren gegangen sind, alle Meta-Daten korrekt übernommen wurden und die interne Verlinkung funktioniert.

Nach Plugin-Updates

Besonders nach Updates von SEO-Plugins (Yoast, RankMath) oder Page Buildern sollten Sie einen Crawl durchführen, um unerwartete Änderungen zu erkennen.

Vor größeren Content-Updates

Crawlen Sie vor großen Content-Überarbeitungen, um den Ausgangszustand zu dokumentieren. Nach den Änderungen können Sie dann die Verbesserungen messen.

Ressourcen und Weiterbildung

Offizielle Dokumentation

Die Screaming Frog Website bietet umfangreiche Dokumentation, Video-Tutorials und einen aktiven Blog mit Use Cases und Best Practices. Die Knowledge Base beantwortet die meisten technischen Fragen.

Community und Support

Die Screaming Frog Community ist aktiv in SEO-Foren, auf Twitter und in Facebook-Gruppen. Bei technischen Problemen antwortet der Support in der Regel innerhalb von 24 Stunden.

Weiterführende Techniken

Für fortgeschrittene Nutzer gibt es zahlreiche Tutorials zu spezialisierten Themen wie:

• Python-Scripting zur Automatisierung von Screaming Frog
• Kombination mit BigQuery für große Datenanalysen
• Custom Extraction für komplexe WordPress-Strukturen
• API-Nutzung für automatisierte Berichte

Fazit: Screaming Frog als unverzichtbares WordPress-SEO-Tool

Screaming Frog ist für professionelle WordPress-SEO unverzichtbar. Die Kombination aus Tiefe der Analyse, Flexibilität und vergleichsweise niedrigen Kosten macht es zum Standard-Tool für technische SEO-Audits. Während die Lernkurve anfangs steil ist, zahlt sich die Investition in die Einarbeitung schnell aus.

Für WordPress-Websites bietet Screaming Frog besondere Vorteile: Es deckt typische WordPress-Probleme wie doppelte Archive, Plugin-generierte Fehler und Theme-bedingte Linkprobleme zuverlässig auf. Die Möglichkeit, Crawls zu speichern und zu vergleichen, macht es ideal für die Überwachung von WordPress-Sites über Zeit.

Kombiniert mit anderen SEO-Tools wie Google Search Console, Google Analytics und einem guten WordPress-SEO-Plugin bildet Screaming Frog das Fundament für datengetriebene, technisch fundierte Suchmaschinenoptimierung. Es ist nicht das einfachste Tool, aber definitiv eines der mächtigsten für alle, die WordPress-SEO ernst nehmen.