File Shopify Robots.txt: come trovarlo, modificarlo e nascondere le pagine

Pubblicato: 2022-06-27

I motori di ricerca come Google perlustrano Internet alla ricerca di nuovi dati e scansionano le pagine Web con crawler o spider per trovare contenuti nuovi o aggiornati.

In qualità di proprietario di un negozio Shopify, puoi utilizzare un file robots.txt per impedire ai motori di ricerca di eseguire la scansione dei contenuti della pagina che potrebbero ridurre la SEO del tuo sito Web rubando il PageRank.

Come affermato anche nella guida di Google a robots.txt, un file robots.txt indica ai motori di ricerca quali pagine o file i crawler possono o non possono richiedere. Tuttavia, tieni presente che ciò non garantisce che manterrai una pagina Web fuori da Google. Vedremo come mantenere una pagina Shopify fuori da Google più avanti in questo articolo.

In questo post, spiegheremo dove si trova il tuo file Shopify robots.txt, come nascondere una pagina dai motori di ricerca e se puoi modificarla. Immergiamoci.

due bot che puntano al testo robots.txt

Come trovare il file Shopify Robots.txt e inviare la tua mappa del sito

Il tuo file Shopify robots.txt si trova nella directory principale del nome di dominio principale del tuo negozio Shopify. Sembrerà una barra del nome di dominio robots.txt come nell'esempio seguente:

esempistore.com/robots.txt

Invio della tua mappa del sito

concetto di mappa del sito web

Se ritieni che una pagina, un file o un contenuto specifico del tuo negozio Shopify sia bloccato da robots.txt e desideri modificarlo in modo che Google e altri motori di ricerca possano indicizzarlo, ripensaci.

NON è necessario modificare il file robots.txt per garantire che Google indicizzi i contenuti del tuo sito web.

Puoi inviare la tua mappa del sito a Google per fargli sapere tutto sui contenuti, i file e gli aggiornamenti del tuo sito web. Le Sitemap vengono generate automaticamente e si trovano nella directory principale dei domini del tuo negozio Shopify. Ad esempio, katies-apperal.com/sitemap.xml .

Un file della mappa del sito di Shopify contiene collegamenti a tutti i tuoi prodotti, pagine, post di blog, immagini di prodotti e raccolte. I motori di ricerca utilizzano questo file per indicizzare il tuo sito in modo che le pagine del tuo negozio vengano visualizzate nei risultati di ricerca.

  • Per il piano Shopify di base: solo il dominio principale del tuo negozio ha un file della mappa del sito generato ed è rilevabile dai motori di ricerca.

  • Per il piano Advanced Shopify o Shopify Plus: se utilizzi domini internazionali, i file della mappa del sito vengono generati per tutti i tuoi domini.

Tieni presente che potrebbe volerci del tempo prima che i motori di ricerca eseguano la scansione e l'indicizzazione delle tue pagine web. Google non garantisce quanto tempo impiegherà il processo. Puoi utilizzare Google Search Console per richiedere l'indicizzazione di ogni pagina manualmente o inviare la mappa del sito del tuo negozio.

Ecco come inviare la tua mappa del sito Shopify a Search Console:

Passaggio 1. Vai al tuo account Search Console. Fare clic su ≡ e selezionare Aggiungi proprietà .

Passaggio 2. Nella casella Seleziona tipo di proprietà , selezionare Prefisso URL . Quindi, inserisci il dominio Shopify che desideri aggiungere come proprietà. (Includere la parte https:// .)

Passaggio 3. Fare clic per continuare. Seleziona Tag HTML nella finestra Verifica proprietà .

Passaggio 4. Evidenzia il tag HTML completo e copialo negli appunti.

<meta name="google-site-verification" content="IV7BPLESttSpBdxSWN1s4zlr4HIcuHkGQYmE3wLG59w" />

Passaggio 5. Vai su Shopify Admin > Online Store > Temi .

Passaggio 6. Trova il tema che desideri modificare e fai clic su Azioni , quindi su Modifica codice .

Passaggio 7. Vedi la sezione Layout, trova e fai clic su theme.liquid .

Passaggio 8. Incolla il tag che hai copiato su una riga vuota direttamente sotto il tag di apertura <head> .

Passaggio 9. Salva e torna a Search Console per fare clic su Verifica .

Si noti che il processo di verifica non avviene immediatamente. Se ricevi un messaggio di errore, attendi 15 minuti prima di fare nuovamente clic su Verifica.

Come modificare il file Shopify Robots.txt

Se stai chiedendo " Posso modificare il mio file Shopify Robots.txt? “la risposta è no . Non puoi modificare un file robots.txt se stai utilizzando un servizio di hosting come Shopify. Shopify gestisce automaticamente i file robots.txt per te e stai certo che lo stanno facendo correttamente.

Ad esempio, Shopify blocca automaticamente la visualizzazione della pagina del tuo carrello nei motori di ricerca. Questo aiuta la SEO del tuo negozio poiché consente di trovare più facilmente le pagine dei prodotti nei risultati di ricerca.

In breve, questo serve per assicurarsi che le pagine dei tuoi prodotti siano più in alto rispetto alla tua pagina di pagamento.

Come nascondere una pagina Shopify dai motori di ricerca?

Anche se non puoi modificare i tuoi file robots.txt di Shopify, puoi nascondere le pagine che non sono incluse nel tuo robots.txt. È possibile personalizzando la sezione <head> del file di layout theme.liquid del tuo negozio.

1. Apri la tua pagina di amministrazione Shopify e vai su Negozio online > Temi .

2. Trova il tema che desideri modificare. Quindi, fai clic su Azioni > Modifica codice .

3. Fare clic su tema.liquido.

4. Per escludere il modello di ricerca, incolla il codice qui sotto nella sezione <head> :

{% if template contains 'search' %}<meta name="robots" content="noindex">{% endif %}

5. Se vuoi escludere una pagina specifica, incolla il codice qui sotto nella sezione <head> :

{% if handle contains 'page-handle-you-want-to-exclude' %}<meta name="robots" content="noindex">{% endif %}

  • Non dimenticare di sostituire l'handle di pagina che desideri escludere con l'handle di pagina corretto.

6. Salva le modifiche.

Fonte: Shopify

A cosa serve un file Robots.txt?

Lo scopo principale di un file robots.txt è gestire il traffico del crawler verso il tuo sito e spesso mantenere una pagina fuori da Google, a seconda del tipo di pagina.

Pagina web: puoi gestire il traffico verso una pagina web utilizzando i file robots.txt, ma non puoi nascondere le tue pagine web dai risultati di ricerca di Google. Può ancora apparire nei risultati di ricerca.

File multimediale: un file robots.txt può aiutarti a gestire il traffico e impedire la visualizzazione di file di immagini, video e audio nei risultati di ricerca di Google.

File di risorse: i file Robots.txt possono bloccare file di risorse come script, immagini o file di stile non importanti e aiutarti a gestire il traffico verso tali file.

Come mantenere una pagina Shopify fuori da Google?

Se vuoi mantenere una pagina web fuori da Google, dovresti utilizzare le direttive noindex o proteggere la tua pagina con password.

Conosci i limiti di un file Robots.txt

  • Una pagina con il file robots.txt può comunque essere indicizzata da Google se collegata da altri siti.
  • Diversi crawler indicizzano la sintassi in modo diverso e alcuni potrebbero non comprendere determinate istruzioni.
  • Spetta al crawler obbedire o meno alle istruzioni del file robots.txt. Non tutti i motori di ricerca supportano le direttive robots.txt.

Nota: in tutti i casi, è importante testare i file robots.txt del tuo negozio Shopify. Puoi utilizzare il tester Robots.txt di Google a tale riguardo.

Articoli utili che potrebbero piacerti:

  • Come creare un collegamento Shopify Aggiungi al carrello
  • Shopify Collection Image Size: come ridimensionare e ottimizzare le tue immagini
  • Come caricare il file HTML nella radice del negozio Shopify