Shopify Robots.txt-Datei: So finden, bearbeiten und verstecken Sie Seiten

Veröffentlicht: 2022-06-27

Suchmaschinen wie Google durchsuchen das Internet nach neuen Daten und crawlen Webseiten mit Crawlern oder Spidern, um neue oder aktualisierte Inhalte zu finden.

Als Inhaber eines Shopify-Shops können Sie eine robots.txt-Datei verwenden, um Suchmaschinen daran zu hindern, Seiteninhalte zu crawlen, die Ihre Website-SEO beeinträchtigen könnten, indem sie den PageRank stehlen.

Wie auch in Googles Leitfaden zu robots.txt angegeben, teilt eine robots.txt-Datei Suchmaschinen mit, welche Seiten oder Dateien Crawler anfordern können oder nicht. Beachten Sie jedoch, dass dies nicht sicherstellt, dass Sie eine Webseite von Google fernhalten. Wir werden später in diesem Artikel erläutern, wie Sie eine Shopify-Seite von Google fernhalten.

In diesem Beitrag erklären wir, wo sich Ihre Shopify-robots.txt-Datei befindet, wie Sie eine Seite vor Suchmaschinen verbergen und ob Sie sie bearbeiten können. Tauchen wir ein.

zwei Bots, die auf robots.txt-Text zeigen

So finden Sie die Shopify Robots.txt-Datei und reichen Ihre Sitemap ein

Ihre Shopify robots.txt-Datei befindet sich im Stammverzeichnis des primären Domainnamens Ihres Shopify-Shops. Es sieht wie im folgenden Beispiel aus wie der Schrägstrich des Domänennamens robots.txt:

examplestore.com/robots.txt

Einreichen Ihrer Sitemap

Website-Sitemap-Konzept

Wenn Sie der Meinung sind, dass eine bestimmte Seite, Datei oder ein bestimmter Inhalt Ihres Shopify-Shops durch robots.txt blockiert wird, und Sie ihn bearbeiten möchten, damit Google und andere Suchmaschinen ihn indizieren können, denken Sie noch einmal darüber nach.

Sie müssen Ihre robots.txt-Datei NICHT bearbeiten, um sicherzustellen, dass Google Ihre Website-Inhalte indexiert.

Sie können Ihre Sitemap an Google senden, um alles über den Inhalt, die Dateien und Aktualisierungen Ihrer Website zu erfahren. Sitemaps werden automatisch generiert und befinden sich im Stammverzeichnis der Domains Ihres Shopify-Shops. Das heißt, katies-apperal.com/sitemap.xml .

Eine Shopify-Sitemap-Datei enthält Links zu all Ihren Produkten, Seiten, Blog-Beiträgen, Produktbildern und Sammlungen. Suchmaschinen verwenden diese Datei, um Ihre Website zu indizieren, damit die Seiten Ihres Geschäfts in den Suchergebnissen angezeigt werden.

  • Für Basic Shopify Plan: Nur die primäre Domain Ihres Shops hat eine generierte Sitemap-Datei und sie ist für Suchmaschinen auffindbar.

  • Für Advanced Shopify oder Shopify Plus Plan: Wenn Sie internationale Domains verwenden, werden Sitemap-Dateien für alle Ihre Domains generiert.

Beachten Sie, dass es einige Zeit dauern kann, bis Suchmaschinen Ihre Webseiten durchsuchen und indizieren. Google garantiert nicht, wie lange der Vorgang dauert. Sie können die Google Search Console verwenden, um die Indexierung für jede Seite manuell anzufordern oder die Sitemap Ihres Shops einzureichen.

So übermitteln Sie Ihre Shopify-Sitemap an die Search Console:

Schritt 1. Gehen Sie zu Ihrem Search Console-Konto. Klicken Sie auf ≡ und wählen Sie Eigenschaft hinzufügen aus.

Schritt 2. Wählen Sie im Feld Eigenschaftstyp auswählen die Option URL-Präfix aus. Geben Sie dann die Shopify-Domain ein, die Sie als Property hinzufügen möchten. (Fügen Sie den https:// Teil hinzu.)

Schritt 3. Klicken Sie, um fortzufahren. Wählen Sie HTML-Tag im Fenster Eigentümerschaft bestätigen aus.

Schritt 4. Markieren Sie das vollständige HTML-Tag und kopieren Sie es in Ihre Zwischenablage.

<meta name="google-site-verification" content="IV7BPLESttSpBdxSWN1s4zlr4HIcuHkGQYmE3wLG59w" />

Schritt 5. Gehen Sie zu Shopify Admin > Online Store > Themes .

Schritt 6. Suchen Sie das Thema, das Sie bearbeiten möchten, und klicken Sie auf Aktionen und dann auf Code bearbeiten .

Schritt 7. Sehen Sie sich den Abschnitt Layout an, suchen Sie theme.liquid und klicken Sie darauf.

Schritt 8. Fügen Sie das kopierte Tag in eine leere Zeile direkt unter dem öffnenden <head> -Tag ein.

Schritt 9. Speichern Sie und kehren Sie zur Search Console zurück, um auf Bestätigen zu klicken .

Beachten Sie, dass der Überprüfungsprozess nicht sofort erfolgt. Wenn Sie eine Fehlermeldung erhalten, warten Sie 15 Minuten, bevor Sie erneut auf Bestätigen klicken.

So bearbeiten Sie die Shopify Robots.txt-Datei

Wenn Sie fragen: „ Kann ich meine Shopify Robots.txt-Datei bearbeiten? “ Die Antwort ist nein . Sie können eine robots.txt-Datei nicht bearbeiten, wenn Sie einen Hosting-Service wie Shopify verwenden. Shopify verarbeitet die robots.txt-Dateien automatisch für Sie, und seien Sie versichert, dass sie dies korrekt tun.

Beispielsweise blockiert Shopify automatisch, dass Ihre Einkaufswagenseite in Suchmaschinen angezeigt wird. Dies hilft der SEO Ihres Shops, da die Produktseiten in den Suchergebnissen leichter gefunden werden können.

Kurz gesagt, dies soll sicherstellen, dass Ihre Produktseiten einen höheren Rang haben als Ihre Checkout-Seite.

Wie verstecke ich eine Shopify-Seite vor Suchmaschinen?

Obwohl Sie Ihre robots.txt-Dateien von Shopify nicht bearbeiten können, können Sie Seiten ausblenden, die nicht in Ihrer robots.txt-Datei enthalten sind. Dies ist möglich, indem Sie den <head> -Abschnitt der theme.liquid-Layoutdatei Ihres Shops anpassen.

1. Öffnen Sie Ihre Shopify-Admin-Seite und gehen Sie zu Online Store > Themes .

2. Suchen Sie das Thema, das Sie bearbeiten möchten. Klicken Sie dann auf Aktionen > Code bearbeiten .

3. Klicken Sie auf theme.liquid.

4. Um die Suchvorlage auszuschließen, fügen Sie den folgenden Code in den Abschnitt <head> ein:

{% if template contains 'search' %}<meta name="robots" content="noindex">{% endif %}

5. Wenn Sie eine bestimmte Seite ausschließen möchten , fügen Sie den folgenden Code in den Abschnitt <head> ein:

{% if handle contains 'page-handle-you-want-to-exclude' %}<meta name="robots" content="noindex">{% endif %}

  • Vergessen Sie nicht, das Seiten-Handle, das Sie ausschließen möchten, durch das richtige Seiten-Handle zu ersetzen.

6. Änderungen speichern .

Quelle: Shopify

Wofür wird eine Robots.txt-Datei verwendet?

Der Hauptzweck einer robots.txt-Datei besteht darin, den Crawler-Traffic zu Ihrer Website zu verwalten und je nach Seitentyp häufig eine Seite von Google fernzuhalten.

Webseite: Sie können den Datenverkehr zu einer Webseite mithilfe von robots.txt-Dateien verwalten, aber Sie können Ihre Webseiten nicht vor den Google-Suchergebnissen verbergen. Es kann weiterhin in den Suchergebnissen erscheinen.

Mediendatei: Eine robots.txt-Datei kann Ihnen dabei helfen, den Datenverkehr zu verwalten und zu verhindern, dass Bild-, Video- und Audiodateien in den Google-Suchergebnissen erscheinen.

Ressourcendatei: Robots.txt-Dateien können Ressourcendateien wie unwichtige Skript-, Bild- oder Stildateien blockieren und Ihnen helfen, den Datenverkehr zu diesen Dateien zu verwalten.

Wie hält man eine Shopify-Seite von Google fern?

Wenn Sie eine Webseite von Google fernhalten möchten, sollten Sie noindex-Anweisungen verwenden oder Ihre Seite mit einem Passwort schützen.

Kennen Sie die Einschränkungen einer Robots.txt-Datei

  • Eine Seite mit einer robots.txt-Datei kann dennoch von Google indexiert werden, wenn sie von anderen Websites verlinkt wird.
  • Verschiedene Crawler indizieren die Syntax unterschiedlich, und einige verstehen möglicherweise bestimmte Anweisungen nicht.
  • Es liegt am Crawler, Ihren robots.txt-Anweisungen zu gehorchen oder nicht. Nicht alle Suchmaschinen unterstützen robots.txt-Anweisungen.

Hinweis: In jedem Fall ist es wichtig, die robots.txt-Dateien Ihres Shopify-Shops zu testen. Dazu können Sie den Robots.txt-Tester von Google verwenden.

Hilfreiche Artikel, die Ihnen gefallen könnten:

  • So erstellen Sie einen Shopify-In-den-Warenkorb-Link
  • Bildgröße der Shopify-Sammlung: So passen Sie die Größe Ihrer Bilder an und optimieren sie
  • So laden Sie eine HTML-Datei in das Stammverzeichnis des Shopify Store hoch