Fünf Möglichkeiten zur Verbesserung Ihrer SEO-Protokollanalyse mit der Splunk-Integration von OnCrawl

Veröffentlicht: 2019-01-03

OnCrawl hat kürzlich eine Splunk-Integration veröffentlicht, um die Protokollüberwachung für Splunk-Benutzer zu erleichtern. Wir haben festgestellt, dass Unternehmen unsere Splunk-Integration hauptsächlich für zwei Zwecke nutzen: Prozessautomatisierung und erhöhte Sicherheitskontrolle. Aber die Vorteile des Tools hören hier nicht auf. Hier sind fünf Möglichkeiten, wie Sie die OnCrawl Splunk-Integration nutzen können, um Ihr technisches SEO zu verbessern.

SEO-Protokollanalyse: die Grundlagen

Was ist eine SEO-Log-Analyse?

Ihre Protokolldateien stellen alle Aktivitäten auf Ihrer Website dar, die vom Server der Website selbst aufgezeichnet wurden. Es ist die vollständigste und zuverlässigste Informationsquelle darüber, was auf Ihrer Website passiert. Dazu gehören die Anzahl und Häufigkeit von Bot-Treffern, die Anzahl und Häufigkeit von organischen SEO-Treffern aus SERPs, eine Aufschlüsselung nach Gerätetyp (Desktop vs. Mobil) oder nach URL-Typ (Seite vs. Ressource), genaue Seitengrößen und tatsächlicher HTTP-Status Codes.

Einige der vielen Vorteile, die die SEO-Protokollanalyse bietet:

  • Erkennen von Spitzen oder Änderungen im Crawling-Verhalten, die darauf hindeuten, wie Ihre Website von Google gehandhabt wird
  • Zu wissen, wie lange es im Durchschnitt dauert, bis neue Seiten indexiert werden und die ersten organischen Besucher erhalten
  • Überwachen, wie sich Bot- und Benutzeraktivitäten auf das Ranking einer Seite auswirken
  • Verstehen, wie Bot- und Benutzerverhalten mit anderen SEO-Faktoren korrelieren

Was ist Splunk?

Splunk ist eine Unternehmenslösung für die Aggregation von Maschinendaten. Es ist in der Lage, Daten aus mehreren Quellen in großem Maßstab zu indizieren und zu verwalten und enthält Funktionen für die Verarbeitung von Serverprotokollen für Standortsicherheits- und Berichtszwecke.

Einige der Vorteile von Splunk:

  • Indizierung und Suche nach verbesserter Datenkorrelation
  • Drilldown- und Pivot-Funktionen für besseres Reporting
  • Echtzeit-Warnungen
  • Daten-Dashboards
  • Hochgradig skalierbar
  • Flexible Bereitstellungsoptionen

Protokollüberwachung in Splunk

Splunk-Benutzer profitieren von einer OnCrawl-Integration, um in Splunk verwaltete Serverprotokolldaten mit SEO-Daten in der OnCrawl-Plattform zu verbinden.

Oncrawl Log Analyzer

Logfile-Analyse zur Bot-Überwachung und Crawl-Budget-Optimierung. Erkennen Sie Website-Gesundheitsprobleme und verbessern Sie Ihre Crawling-Frequenz.
Mehr erfahren

Verbessern Sie Ihr technisches SEO mit OnCrawl + Splunk

1. Verwenden Sie Protokolle für eine eingehende SEO-Analyse

Splunk beweist die Fähigkeit, Protokolldaten zu aggregieren, zu suchen, zu überwachen und Warnmeldungen für Protokolldaten einzurichten. Es analysiert und reindexiert Inhalte in Serverprotokollen. Mithilfe leistungsstarker Such- und Filterfunktionen liefert es Antworten auf Fragen zu den Daten in Ihren Protokolldateien. Dieser Verarbeitungsschritt liefert Statistiken für Trends, die in Protokolldaten aufgedeckt werden.

Wenn Sie dies jedoch auf SEO-Daten anwenden möchten, beginnen Sie am besten mit den Rohdaten. Und genau das leistet die OnCrawl Splunk-Integration.

Anstatt nur separate Statistiken für Protokolldaten anzuzeigen, können Sie Informationen aus Protokollen mit allen anderen Datenquellen in der OnCrawl-Plattform integrieren. So können Sie wiederum Zusammenhänge zwischen SEO-Metriken und Informationen zum Nutzer- und Bot-Verhalten in Ihren Logfiles untersuchen.

Anzahl der organischen Besuche nach Seitenklicktiefe.

Diese datenübergreifende Analyse kann für SEO nützliche Achsen enthalten:

  • Aufschlüsselung des Crawling-Verhaltens nach einzelnen Bots
  • Zeit zwischen dem ersten Crawl und dem ersten organischen Besuch
  • Vergleich zwischen Seiten, die Benutzern und Bots bereitgestellt werden, und Seiten, die während eines Audit-Crawls bereitgestellt werden
  • Entdeckung verwaister Seiten
  • Korrelationen zwischen Crawl-Frequenz und Ranking, Impressions, CTR
  • Einfluss der internen Verlinkungsstrategie auf die Benutzer-/Bot-Aktivität
  • Beziehung zwischen Seitenklicktiefe und Benutzer-/Bot-Aktivität
  • Beziehung zwischen interner Seitenpopularität und Benutzer-/Bot-Aktivität
  • Aufschlüsselung der Benutzer- und Bot-Aktivität auf Seiten, gruppiert nach SEO-Leistung

2. Erleichtern Sie die Einrichtung

Unabhängig davon, ob Sie Automatisierung oder feinere Kontrollen für die Datensicherheit benötigen oder nicht, wenn Sie ein Splunk-Benutzer sind, werden Sie es tun
wie einfach es einzurichten ist.

Wenn Sie kein Systemadministrator sind, kann das Einrichten der Protokollüberwachung für SEO wie eine komplizierte Aufgabe erscheinen.

Unser Vorschlag ist, die schwierigen Teile einfach zu überspringen . Sie können jetzt alles direkt in Splunk einrichten und den von Ihnen generierten Schlüssel verwenden, um die Verbindung mit OnCrawl herzustellen.

Das ist es. Sie sind bereit zu gehen. Es könnte nicht einfacher sein.

3. Profitieren Sie von der Prozessautomatisierung mit Splunk

Der manuelle Prozess der Verwendung von in Splunk gesammelten Protokolldaten erfordert mehrere Schritte:

  • Erstellen Sie Filter, um nach der richtigen Auswahl an Protokolldaten zu suchen
  • Erstellen Sie eine gespeicherte Suche
  • Richten Sie die Automatisierung zum Ausführen der Suche ein
  • Ausgabe in CSV
  • Stellen Sie in SSH eine Verbindung zu Ihrer Splunk-Instanz her
  • Navigieren Sie zum CSV-Ausgabeordner
  • Übertragen Sie die Datei auf Ihren Computer
  • Stellen Sie eine Verbindung zum OnCrawl-FTP-Bereich her
  • Übertragen Sie die Datei auf OnCrawl…

Dieser Vorgang muss regelmäßig wiederholt werden, um Lücken in Ihren Protokolldaten zu vermeiden. Oft wird dies zur täglichen Aufgabe.

Wenn Sie sich für die Splunk-Integration für OnCrawl entscheiden, müssen Sie den Task nicht mehr regelmäßig starten . Sie müssen nur den Prozess einrichten (und wie bereits erwähnt, könnte es nicht einfacher sein). Sie müssen sich nicht mehr darum kümmern, jeden Tag ein Skript oder, schlimmer noch, eine Reihe manueller Aktionen zu starten. die Integration erledigt das für Sie.

4. Schützen Sie Ihren Prozess

Schützen Sie sich vor Datenverlust, wenn es ein Problem gibt. Da die Protokollüberwachung auf einem kontinuierlichen Datenstrom beruht , können Lücken zu falschen Schlussfolgerungen führen. Sie sollten niemals Fragen stellen müssen wie: Ist das offensichtliche Fehlen organischer Besuche heute Morgen auf etwas zurückzuführen, das bei Google passiert ist, oder fehlen mir einfach die Daten?

Die OnCrawl Splunk-Integration schützt Sie, falls Ihr Server ausfällt oder die Verbindung unterbrochen wird, und verhindert menschliche Fehler, wenn Sie keine Zeit haben oder einfach vergessen, Daten hochzuladen. Wenn wir keine Verbindung zum Server herstellen können, entstehen keine Lücken in Ihren Daten; wir holen es einfach etwas später ab. Wenn Sie einen Datensatz aus einem früheren Datum finden, den Sie vergessen haben, Splunk hinzuzufügen, wird die OnCrawl-Integration ihn ebenfalls automatisch abrufen.

5. Übernehmen Sie die Kontrolle über die Datensicherheit

Bei OnCrawl nehmen wir die Sicherheit Ihrer Daten sehr ernst.

Wie immer werden vertrauliche Daten in Ihren Protokollen dort aufbewahrt, wo Sie sie in Ihrem privaten, sicheren FTP-Bereich abgelegt haben, und werden niemals an anderer Stelle verfügbar gemacht. Die einzigen personenbezogenen Daten, die wir verarbeiten, sind beispielsweise IP-Adressen, wenn wir die Authentizität von Googlebot-Besuchen validieren. Wir speichern keine Aufzeichnungen über die verwendeten IP-Adressen, sondern nur über das Ergebnis der Validierung. Bei Bedarf können Sie sensible Informationen, die zur Analyse zur Verfügung gestellt wurden, jederzeit entfernen, indem Sie Dateien aus Ihrem FTP-Bereich entfernen.

Die Integration für Splunk geht sogar noch weiter. Wir stellen sicher, dass Sie während des gesamten Prozesses die Kontrolle über Ihre Daten behalten . Die Zugriffsrechte, die zu teilenden Daten und die Häufigkeit der Updates legen Sie in OnCrawl fest. Wenn Sie Daten über die Splunk-Integration mit OnCrawl teilen, verwenden wir sichere Standardprotokolle, um mit Splunk zu kommunizieren, geschützt durch ein Passwort und einen von Ihnen eingerichteten Schlüssel.

Da die Einrichtung in Splunk erfolgt, sieht OnCrawl nie etwas, was Sie uns nicht erlauben zu sehen. Sie entscheiden, welche Informationen Sie mit OnCrawl teilen . Nicht nur das, da Sie die Einrichtung selbst verwalten, können Sie jederzeit Änderungen an Ihrem Protokollierungsprozess oder an den Standards Ihres Unternehmens vornehmen.