CRO-Möglichkeiten mit SEO-Crawlern finden

Menschen werden immer noch gebraucht, aber, Junge, können Crawler helfen

Je länger ich CRO mache, desto mehr wird mir die Bedeutung verschiedener Arten von Forschung bewusst. Viele Jahre lang habe ich mich intensiv mit quantitativen Daten beschäftigt (und bin es bis zu einem gewissen Grad immer noch). Erzielen einer sauberen und zuverlässigen Datenerfassung in nahezu perfekten Google Analytics-Setups. Das wird zu den besten CRO-Programmen führen, richtig? Es beginnt Sie sicher an einem großartigen Ort, aber es ist nur ein Anfang.

In diesem Beitrag stelle ich Ihnen einen internen Suchergebnis-Workflow vor, den ich im Laufe der Jahre aus meinen Analyse- und SEO-Tagen entwickelt habe und der Ihnen helfen wird, Ihre Recherche in Bereichen zu beschleunigen, auf die sich Ihr CRO-Programm konzentrieren sollte.

Lernen Sie Screaming Frog kennen.

Suchergebnisse (interne Site-Suche) Deep Dive

Es wäre mir ein Leichtes, Ihnen Absichtszuordnungen (sowohl für die Suchabsicht als auch für die SERP-Absicht) zu zeigen, um anzuzeigen, wenn die Relevanz fehlt (sowohl für Schlüsselwörter als auch für Seitentypen). Vielleicht kommt das später, aber ich denke, das ist ziemlich viel gemacht worden.

Stattdessen möchte ich über etwas sprechen, das der Konversion noch näher kommt, Ihre internen Site-Suchergebnisse.

Die Site-Suche ist eines der größeren Signale dafür, dass Ihre Benutzer wirklich etwas wollen.

Wir können den Unterschied hier auf dieser Website für Poolbedarf zwischen Benutzern, die suchen, und denen, die dies nicht tun, erkennen:

130 % mehr Conversions bei der Suche sind nicht allzu überraschend, aber es zeigt die Leistungsfähigkeit, das bestmögliche Sucherlebnis zu bieten.

Lassen Sie uns nun in die Suchbegriffe eintauchen, um sicherzustellen, dass das Erlebnis optimiert ist.

Meine erste Empfehlung ist, alle Ihre Suchbegriffe herunterzuladen (die letzten 12 Monate sind normalerweise am sinnvollsten, es sei denn, Sie sind stark saisonabhängig).

Führen Sie sie als Nächstes durch ein Cluster-Tool, um zu verstehen, wie Menschen auf einer höheren Ebene suchen (dies gibt Ihnen eine bessere Richtung als das Durchkämmen von Tausenden von KWs).

(Stellen Sie vor dem Clustering sicher, dass Sie Ihre KWs standardisieren und auf Rechtschreibfehler und/oder unterschiedliche Groß- und Kleinschreibung bereinigen.)

Verwenden Sie =trim(clean(lower(cell-number))) für Ihre Formel, um diese in Google Sheets zu bereinigen.

Kopieren Sie sie jetzt und fügen Sie sie in Keyword Grouper Pro von MarketBold ein (dies ist kostenlos).

Um eine Gruppe zu bilden, schätzen Sie, wie viele basierend darauf, dass ich anfangs 1.000 Schlüsselwörter verwende, also schätze ich, dass 10 pro Gruppe mir hier die richtige Anzahl von Gruppen geben. Sie wissen nie wirklich, wie viele Gruppen Sie wollen, aber Sie sollten genug haben, um repräsentativ für Ihre Benutzer zu sein, die basierend darauf suchen, wie viele Sie hochladen (Sie werden mit der Zeit besser darin).

über GIPHY

Wenn ich die geclusterten Keywords sehe, würde ich sie in ein paar verschiedene Kategorien einteilen, je nachdem, wie die Leute suchen:

• Teilenummern (bekommt nicht viel mehr Boden des Trichters als das)
• Markennamen
• Breite Kategorietypen

Jetzt kann ich mit den GA-Suchbegriffen gezielter vorgehen, um zu wissen, wonach ich suchen muss.

Da Benutzer, die nach Produktnummern suchen, in diesem Szenario eine hohe Kaufabsicht haben, möchte ich dort beginnen (und nicht nur die obersten „x“-Suchergebnisse betrachten). Mit einigen einfachen Regex, um nur Produktnummern (mehr als eine Zahl in den Suchbegriffen) zu isolieren, finden wir heraus, dass 80 % der Suchen eine Produktnummer enthalten

Jetzt wollen wir unsere Suchergebnisse aus Google Analytics exportieren. Wenn Sie viele Suchbegriffe haben, müssen Sie möglicherweise die API oder ein Tool wie das Google Analytics Google Sheets-Add-on (kostenlos) verwenden.

Überprüfung der Suchergebnisse (Wonach suchen wir?)

Zugegeben, hier habe ich zum ersten Mal angefangen, um sicherzustellen, dass ich nicht in einen Kaninchenbau gehe. Aber nachdem ich das zu oft getan hatte, um es jetzt zählen zu können, wusste ich, wonach ich suchte

Die „Problembereiche“ hier variieren je nachdem, welche Plattform und welchen Suchanbieter Sie verwenden. Für dieses Szenario interessiere ich mich hauptsächlich für:

• die Anzahl der angezeigten Ergebnisse
  
  Hier gezeigt:

• Artikel, die als vergriffen angezeigt werden
  
  Hier gezeigt:

• Die Top-3-Kategorien, unter die die Suchergebnisse fallen (dies könnte später mit einem SVERWEIS erreicht werden, aber ich würde es vorziehen, dies hier/auf einmal zu tun)
  
  Hier gezeigt:

Die folgenden Fragen helfen mir, die Daten zu verstehen:

• Zeigen wir die richtige Menge an Suchergebnissen für diese Produktnummernsuchen an?
  Bei fast allen anderen Arten von Suchen wäre es nicht optimal, nur ein Ergebnis zu haben, aber basierend auf diesen Suchen ist es sinnvoll, nur 1 Ergebnis anzuzeigen. Aber ziemlich wichtig, dass wir dieses eine Ergebnis sehen!

• Bei welchen Suchergebnissen wurden die meisten festsitzenden Produkte zurückgegeben?
  Auch etwas relevanter für Suchen, die viele Ergebnisse zurückgeben.

• Welche Kategorien erhalten die meisten …
  
  
  • Produktsuche?
  • Haben Sie die meisten Out-of-Stock-Ergebnisse?
  • Wurden die wenigsten Ergebnisse zurückgegeben (was höchstwahrscheinlich zu höheren Exits führen wird)?

Verwendung von Screaming Frog zur Nachahmung von Suchergebnissen

Jetzt kommt der spaßige Teil – mit Screaming Frog!

Ich werde keine Aspekte der Verwendung von Screaming Frog behandeln. Es ist ein sehr komplexes Werkzeug, und obwohl ich es seit fast einem Jahrzehnt verwende, gibt es wahrscheinlich noch mehr, was ich damit machen könnte.

Der letzte „Liebe zum Detail“-Teil besteht darin, sich die URL Ihrer Website anzusehen, nachdem Sie nach dem Muster gesucht haben:

Dies ist wichtig zu wissen, da wir den Suchbegriff aus Google Analytics an die Website-URLs anhängen werden, um diesem Muster zu entsprechen. Wir ahmen einen Benutzer nach, der mit dem Crawler danach sucht, und extrahieren die Interessengebiete, die wir bereits abgedeckt haben (Suchergebnisse, nicht vorrätig und Kategorien).

1. Schnappen Sie sich alles vor Ihrem Suchbegriff in der URL:

2. Kombinieren Sie diese URL-Zeichenfolge mit dem Suchbegriff:

Hinweis: Wenn Ihre Suchbegriffe Leerzeichen enthalten, müssen Sie Advanced Regex oder JS verwenden, um %20 in die URL einzufügen. Ich persönlich benutze TextSoap für diese Manipulationen.

3. Öffnen Sie Screaming Frog und wechseln Sie in den Listenmodus:

4. Wählen Sie aus, wie Sie Ihre URL-Liste hochladen möchten (fügen Sie sie nicht ein, wenn Sie über 10.000 haben, das Laden dauert ewig):

5. Bevor Sie Ihren Crawler ausführen, sollten Sie einen Weg finden, die benötigten Elemente aus der Website zu extrahieren.

Ich zeige die Suchergebnisse hier in SF und den Rest können Sie auswählen, wie Sie extrahieren möchten.

1. Sie möchten die Anzahl der Suchergebnisse extrahieren, um zu wissen, wie viele Ergebnisse zurückgegeben werden, wenn dieses Schlüsselwort gesucht wird. Dazu verwenden wir XPATH (meine bevorzugte Sprache normalerweise in SF).

2. Normalerweise versuche ich zuerst den einfachsten Weg und gehe erst dann in die Inspektion des Elements, wenn es nötig ist. #WorkSmarter mit der Chromerweiterung XPather.

GIPHY

3. Das gibt mir den XPATH, den ich brauche, zusammen mit einer Vorschau der „Ausgabe“ dessen, was ich höchstwahrscheinlich in Screaming Frog sehen werde.

4. Hinweis: Ich werde mich nicht darum kümmern, nur die Anzahl der Ergebnisse zu extrahieren. Das ist eine 5-Sekunden-Bereinigung in Google Sheets.

5. Jetzt kann ich dies in SF unter dem Abschnitt Configuration → Custom → Extraction eingeben, siehe hier:

6. Ich werde die Ausgabe auf Text extrahieren ändern, um sie weiter zu bereinigen und unnötiges HTML wegzulassen.

7. Sobald Sie auf OK klicken, können Sie die angegebenen URLs crawlen, die Sie zuvor (oder vielleicht noch nicht) hochgeladen haben. (Auch hier haben wir URLs hochgeladen, um das Crawlen der gesamten Website zu vermeiden und nur die Suchbegriffe zu crawlen, die uns wichtig sind.)

8. Hier ist ein Beispiel der Ausgabe für eine Handvoll URLs und die Anzahl der Suchergebnisse, die diese Suchbegriffe zurückgegeben haben:

9. Als Nächstes möchten Sie wahrscheinlich wissen, wie oft diese Suchen stattfinden. Hier können Sie Google Analytics verbinden, um die Anzahl der Seitenaufrufe für die entsprechenden URLs anzuzeigen.

10. Ich persönlich finde es hilfreich, hier ein „Verhältnis“ von Seiten mit hohen Suchergebnissen zu einer niedrigen Anzahl von zurückgegebenen Ergebnissen zu erstellen.

Gibt es außerdem einen Zusammenhang zwischen einer niedrigen Anzahl von Ergebnissen und vielen Ausstiegen auf diesen Seiten? (Ich sehe dies bei weniger als 10 Ergebnissen, was bedeuten würde, dass die Suchergebnisse nicht „voll“ aussehen, da die meisten Websites nicht mehr als 5 pro Zeile haben.)

11. Andere hilfreiche Datenpunkte, die Sie hier verwenden könnten (je nachdem, wie Ihre Suchergebnisse und Facettennavigation angezeigt werden):

Welche Suchergebnisse liefern die meisten Out-of-Stock-Ergebnisse? (Wenn Sie keine Maßnahmen ergreifen können, z. B. eine Benachrichtigung, wenn dieses Produkt auf Lager ist, möchten Sie vielleicht darüber nachdenken, es aus den Suchergebnissen zu entfernen.)

Zuordnung von Suchbegriffen zu Kategorien (und Unterkategorien, falls relevant). Hilft, die Nachfrage von Benutzern im Laufe der Zeit zu verstehen, und liefert viele verschiedene Erkenntnisse – von neuen Tests bis hin zur Personalisierung für mehrdeutige Schlüsselwörter in der Funktionsweise der Sortierung von Ergebnissen.

Produkt # sucht, wie wir zuvor gezeigt haben. Die meisten Leute werden nicht mehrere Suchen durchführen, wenn ihre Produktnummer nichts zurückgibt. Das ist vielleicht nicht sofort eine einfache Lösung, aber Sie könnten ein Exit-Intent-Popup anzeigen, um benachrichtigt zu werden, wenn dieses Produkt wieder auf Lager ist.

Ich könnte hier weitermachen, aber hoffentlich haben diese Beispiele dazu beigetragen, ein besseres Bild davon zu zeichnen, wie Sie Ihre eigenen Suchergebnisse durchsuchen können, um bessere Einblicke in die Art der Erfahrung zu erhalten, die sie den Benutzern bieten.

Hinweis: Sie haben vielleicht bemerkt, dass ich die Seiten gewechselt habe, die ich hier extrahiere. Als ich mit diesem Blogbeitrag begann, verwendete die erste Website einen anderen Suchanbieter, dann änderte sie sich, und ich wollte ein besseres Beispiel zeigen, das auf XPATH im Vergleich zum Eintauchen in andere Methoden basiert (dies ist normalerweise die zuverlässigste Methode, zusammen mit CSS). Selektoren).

Zweiter Hinweis: Filtern Sie die IP-Adresse Ihres Crawlers in Google Analytics heraus, damit Sie sich nicht in Ihren Seitenaufrufzahlen mitzählen. Wenn Sie Ihr Seitenaufruf-Tag 2-3 Sekunden nach dem Laden Ihres Fensters auslösen, müssen Sie sich keine Gedanken über Crawler- oder Bot-Traffic machen (und ein großes Lob an Sie, das ist eine viel nützlichere Wahrheit der Daten ).

Skalierung + Bereiche zur Automatisierung dieses Prozesses

Einige von Ihnen werden vielleicht sagen: „Nun, das ist nicht automatisiert, ich möchte das nicht manuell tun.“

Das ist ein absolut gültiger Punkt. Ich persönlich habe nichts dagegen, weil die meisten meiner Kunden nicht Millionen von Suchergebnissen zurückerhalten, um dies wöchentlich (oder öfter) zu rechtfertigen. Dies ist normalerweise eine monatliche oder vierteljährliche Aufgabe, die ich in Verbindung mit Google Analytics durchführe, um zu sehen, ob sich die Trends und Muster ändern.

Wenn Sie technisch versierter sind, können Sie bei Screaming Frog bleiben und eine VPS-Lösung einrichten, um automatisierte Crawls in der Cloud auszuführen und die Ergebnisse nach Abschluss an Google BigQuery zu übertragen. SF hat eine nette Anleitung dazu.

Es gibt andere Lösungen, die „schlüsselfertiger“ und definitiv weniger praktisch sind, wie ContentKing (ich habe sie in der Vergangenheit verwendet), das auch „Warnungen“ ermöglicht, wenn bestimmte Schwellenwerte erreicht werden. (Denken Sie an Produktnummernsuchen ohne zurückgegebene Ergebnisse = E-Mail- oder Slack-Benachrichtigung).

Andere Bereiche, nach denen Sie mit einem SEO-Crawler suchen sollten

Hoffentlich hat Ihnen dies die Augen ein wenig mehr für die Möglichkeiten der Verwendung von SEO-Crawlern geöffnet, um Erkenntnisse zur Optimierung zu gewinnen. (Screaming Frog ist nur einer von vielen, aber der, den ich empfehle).

Interne Suchergebnisse sind nur ein kleiner Teil dessen, wofür ich Crawler verwende. Es gibt so viel mehr, was Crawler für Sie finden können. Ich setze sie bei der Arbeit mit meinen Kunden auf vielfältige Weise ein.

Wenn Sie spezifische Fragen oder Kommentare zu diesem oder anderen CRO-bezogenen Themen haben, zögern Sie nicht, mich über LinkedIn, Twitter oder per E-Mail zu kontaktieren: [email protected].