Crawl über Crawl jetzt verfügbar

Veröffentlicht: 2019-11-21

Unsere Crawl-over-Crawl-Funktion ermöglicht es Ihnen, zwei verschiedene Crawls zu vergleichen und zeigt Crawl-Entwicklungen an.

Im Jahr 2016 baute es auf unserer vorherigen Veröffentlichung zu „Trends“ auf, die Ihnen die Möglichkeit gab, globale Trends zwischen verschiedenen Crawls zu erkennen. Jetzt können Sie auf vollständige Ansichten Ihrer SEO-Verbesserungen zugreifen und Unterschiede zwischen Crawls zu einem bestimmten Thema hervorheben . Das aktualisierte Crawl over Crawl enthielt neue Arten von Diagrammen zum Lesen Ihrer Daten.

Im Jahr 2019 wurde die Crawl-over-Crawl-Funktion verbessert. Sie können jetzt untersuchen:

  • Zwei Versionen einer Website, die dieselben oder ähnliche Seiten enthalten, z. B. Produktions- vs. Staging -Websites oder mobile vs. Desktop- Versionen.
  • Dieselbe Website zu zwei verschiedenen Zeitpunkten, z. B. vor und nach einer Änderung auf der Website.

Vergleich zweier Versionen einer Website

Um zwei Websites zu vergleichen, untersucht OnCrawl die von Ihnen angegebene Start-URL für zwei verschiedene Crawls, um die Unterschiede in den Webadressen der verschiedenen Websites zu ermitteln. Es wird davon ausgegangen, dass diese beiden Versionen der Website denselben (oder nahezu denselben) Inhalt enthalten. Dies bedeutet, dass die meisten Slugs der URLs innerhalb der beiden Domains, Ordner oder Subdomains, die Sie vergleichen, identisch sein müssen .

Hier sind einige Beispiele für Websites, die verglichen werden können:

Anwendungsfall Crawl 1 – Start-URL Crawl 2 – Start-URL
Produktions- vs. Staging-Sites https://www.beispiel.com http://staging.example.com/site/
Desktop- und mobile Websites https://www.beispiel.com https://m.example.com
Regionale Versionen https://www.example.com/en-us/ https://www.example.com/en-ca/
Regionale Versionen https://www.beispiel.com https://www.example.co.uk

Bei komplexen Unterschieden zwischen Start-URLs ist der automatische Abgleich möglicherweise nicht ausreichend. Wenn dies der Fall ist, wird beim Einrichten Ihres Crawls ein Fehler angezeigt, der Sie auffordert, OnCrawl über den Chat zu kontaktieren. Wir sind in der Lage, den automatischen Abgleich zu überschreiben, um ihn an Ihren speziellen Fall anzupassen.

Vergleich einer Website zu zwei verschiedenen Zeitpunkten

Um eine Website zu zwei verschiedenen Zeitpunkten zu vergleichen, z. B. vor und nach einer Verbesserung oder einer wesentlichen Änderung der Website, müssen Sie Folgendes angeben:

  • Dieselben Start-URLs
  • Dieselbe Crawling-Breite (dieselben Subdomain-Explorationsregeln)

So richten Sie ein Crawl-over-Crawl ein

Sie können zwischen zwei vorhandenen Crawls ein Crawl-over-Crawl ausführen oder beim Erstellen eines neuen Crawls den Vergleich mit einem vorherigen Crawl anfordern. Weitere Informationen zum Erstellen von Crawl over Crawls finden Sie in der Wissensdatenbank von OnCrawl.

Wie man einen Crawl over Crawl Sunburst liest

Sie lesen einen Sonnendurchbruch wie einen traditionellen Kuchen. Diese Grafiken sind sehr nützlich, um die Entwicklung einer Website zu verfolgen, Crawl für Crawl zu durchsuchen oder Unterschiede zwischen zwei Versionen einer Website zu überprüfen (z. B. zwischen einer Live-Version und während einer Umstrukturierung).
Mit diesem mehrstufigen Tortendiagramm können Sie zwei Crawls in Abhängigkeit von einem bestimmten Thema vergleichen:

  • Die erste Ebene und der innere Kreis: zeigt die Seiten, die zum ersten Crawl (dem älteren Crawl) gehören.
  • Die zweite Ebene und der äußere Kreis: zeigt die Seiten des zweiten Crawls (des neueren), die jedem Segment des inneren Kreises entsprechen.

So findet man beispielsweise leicht indexierbare Seiten im ersten Crawl, die im zweiten nicht mehr vorhanden sind und umgekehrt.

In diesem Diagramm zeigt der innere Kreis die Aufteilung der Seiten aus der Sicht des ersten Crawls (der ältere). Sie können sehen, dass es indexierbare Seiten, keine indexierbaren Seiten und Seiten gibt, die nicht im ersten Crawl waren, aber im zweiten (dem grauen Abschnitt) erscheinen.

Dann können Sie für jeden Abschnitt des inneren Kreises die Seitenaufteilung eines bestimmten Abschnitts im zweiten Crawl sehen. Der innere graue Abschnitt bedeutet, dass diese Seiten beim ersten Crawling nicht existierten, aber im zweiten erscheinen (der äußere grüne und rote Abschnitt, der zum inneren grauen gehört).

Graue Abschnitte bedeuten, dass Seiten neu oder nicht in der Struktur vorhanden sind, je nachdem, zu welchem ​​Kreis sie gehören.

Durch Klicken auf die Legende können Sie entscheiden, welche Daten Sie anzeigen oder fokussieren möchten. Crawl 2 bietet eine globalere Sicht.

Schauen wir uns den inneren Kreis an.

Die Verteilung von Seiten im ersten Crawl nach ihrer Indexierbarkeit

Der erste Crawl enthält 10.854 indexierbare Seiten und 177 nicht indexierbare Seiten. 1.661 Seiten wurden nur im zweiten Crawl gefunden.

Schauen Sie sich nun den äußeren Kreis an. Für jedes Segment des ersten Kreises finden wir die Verteilung dieser Seiten im zweiten Crawl.


Von den 10.854 indexierbaren Seiten im ersten Crawl sind nur noch 10.104 im zweiten Crawl indexierbar. 560 sind nun nicht indexierbar und 190 Seiten waren zum Zeitpunkt des zweiten Crawls nicht mehr Teil der crawlbaren Website.

Konzentrieren wir uns auf einen kleinen Abschnitt: nicht indexierbare Seiten im ersten Crawl

Durch die Verwendung der Legende zum Ausblenden indexierbarer Seiten und Seiten, die zum Zeitpunkt des ersten Crawls nicht in der Website-Struktur enthalten sind, können wir uns beim ersten Crawl nur auf die nicht indexierbaren Seiten konzentrieren.

Von den 177 nicht indexierbaren Seiten aus dem ersten Crawl sind nun 94 im zweiten Crawl indexierbar und 13 bleiben indexierbar.


Von den 177 nicht indexierbaren Seiten im ersten Crawl sind 70 im zweiten Crawl nicht mehr vorhanden. 94 + 13 + 70 = 177. Wir finden die erwartete Aufschlüsselung der 177 nicht indexierbaren Seiten vom ersten Crawl.

Fokus auf neue Seiten: Seiten, die nur im zweiten Crawl gefunden werden

Lassen Sie uns nun die Legende verwenden, um sowohl indexierbare als auch nicht indexierbare Seiten vor dem ersten Crawling auszublenden und nur Seiten anzuzeigen, die während dieses Crawlings nicht Teil der Website-Struktur waren. Auf diese Weise können Sie den Status neuer Seiten in Bezug auf die Indexierung anzeigen.


Alle neuen Seiten: 1 661 Seiten.
Von den 1 661 neu erstellten Seiten sind 709 nicht indexierbar.
Von den 1661 neu erstellten Seiten sind 952 indexierbar.

Zusammenfassung: alle Seiten ab dem zweiten Crawl

10.104 Seiten waren im ersten Crawl indexierbar. 11 150 sind jetzt in der zweiten indexierbar. 177 Seiten waren beim ersten Crawl nicht indexierbar, aber 1 282 sind jetzt beim zweiten nicht indexierbar.
1661 Seiten wurden erstellt und 260 Seiten wurden aus der Struktur gelöscht.

Crawl over Crawl: verfügbare Daten

Diese neue Funktion ist nach Geschäftsexpertise und zwischen den folgenden Registerkarten unterteilt:

  • Struktur
  • Interne Verlinkung
  • Inhalt
  • Statuscodes
  • Leistung

Im Abschnitt „Inhalt“ finden Sie beispielsweise einen starken Fokus auf die Unterschiede in der Duplizierung zwischen den beiden Crawls:

Außerdem können Sie analysieren, wie sich Ihre Seitentiefe zwischen den beiden Crawls unterscheidet. In der folgenden Grafik können Sie die Tiefenunterschiede sehen:


Wenn wir uns beispielsweise die Tiefe 5 ansehen, können wir Seiten sehen, die in eine flachere oder tiefere Tiefe gegangen sind, oder Seiten, die aus einer geringeren oder tieferen Tiefe zwischen Crawl 1 und 2 stammen. Hier 264 Seiten, die in Crawl 1 und in Tiefe 5 waren in eine geringere Tiefe gegangen sind (Tiefe 4, 3 oder 2).

Dies ist nur eine Übersicht dessen, was verfügbar ist. Mit unserem Daten-Explorer können Sie auch in mehr als 700 Metriken für Crawl-Vergleiche eintauchen.

Starten Sie Ihre kostenlose Testversion