Crawler-Session analysieren

Crawler-Session analysieren

Die Crawler-Session-Funktion zeigt den zeitlichen Verlauf eines einzelnen Crawl-Vorgangs als Baumdiagramm.

Aktivierung:

• In der Timeline erscheint neben jeder IP-Adresse ein 🕷-Symbol (nur wenn kein Pfad-Filter aktiv ist).
• Klicke auf 🕷 um die Session dieses Crawlers zu analysieren.

Was ist eine Crawler-Session?

• Alle GET-Anfragen desselben User-Agents aus demselben IP-Bereich (IPv4: /24-Block, IPv6: exakte IP).
• Eine Session endet nach 60 Minuten Inaktivität.
• 304-Antworten werden herausgefiltert.

Baum-Ansicht:

• Anfragen die weniger als 10 Sekunden auseinanderliegen erscheinen auf derselben horizontalen Ebene (gleichzeitige Aufrufe).
• Größere Pausen führen zu einer tieferen Ebene — mit Anzeige der Pausendauer.
• Klicke auf einen Knoten um den vollständigen Pfad zu kopieren.
• Hover zeigt Pfad, Zeitstempel und Statuscode.

Listen-Ansicht:

• Alternative Darstellung aller Anfragen der Session mit Zeitstempeln und Statuscodes.
• Filter „📄 Nur Docs" blendet alle Nicht-Dokument-Pfade aus.