Webinar Digest: audit SEO in tempo reale e file di registro con Bill Hartzer

Pubblicato: 2018-10-02

Il 25 settembre, OnCrawl è stata felice di ospitare Bill Hartzer per un webinar sull'analisi dei file di registro e sul perché è importante per gli audit SEO. Ha eseguito il proprio sito Web per mostrare l'impatto delle ottimizzazioni sull'attività dei bot e sulla frequenza di scansione.

Presentazione di Bill Hartzer

Bill Hartzer è un consulente SEO ed esperto di nomi di dominio con oltre 20 anni di esperienza. Bill è riconosciuto a livello internazionale come esperto nel suo campo ed è stato recentemente intervistato su CBS News come uno dei principali esperti di ricerca del paese.

Nel corso di questo webinar di un'ora, Bill ci dà un'occhiata ai suoi file di registro e discute come li usa nel contesto di un audit del sito. Presenta i diversi strumenti che utilizza per verificare le prestazioni del sito e il comportamento dei bot sul suo sito.

Infine, Bill risponde alle domande su come utilizzare OnCrawl per visualizzare risultati significativi e fornisce suggerimenti ad altri SEO.

Come accedere ai file di registro tramite il plugin cPanel per WordPress

Se il tuo sito web è realizzato con WordPress e utilizzi il plugin cPanel, puoi trovare i log del tuo server direttamente nell'interfaccia di WordPress.

Passa a Metriche, quindi a Raw Access. Lì puoi scaricare file di registro giornalieri dal file manager, nonché archivi zippati di file di registro meno recenti.

Esaminare il contenuto di un file di registro

Un file di registro è un file di testo di grandi dimensioni che contiene informazioni su tutti i visitatori del tuo sito Web, compresi i bot. Puoi aprirlo usando un editor di testo di base.

Non è difficile individuare potenziali hit di bot da googlebot o bing, che si identificano nei file di registro, sebbene sia una buona idea confermare l'identificazione del bot utilizzando le ricerche IP.

Potresti anche trovare altri bot che eseguono la scansione del tuo sito, ma che potrebbero non esserti utili. Puoi impedire a questi bot di accedere al tuo sito.

OnCrawl elaborerà l'analisi grezza nei tuoi file di registro per darti una visione chiara dei bot che visitano il tuo sito.

Utilizzo dei file di registro per ulteriori informazioni sulle statistiche di scansione

Le informazioni sulle statistiche di scansione sono disponibili nella versione precedente di Google Search Console in Scansione > Statistiche di scansione assume un nuovo significato rispetto alle informazioni nei file di registro.

Tieni presente che i dati mostrati in Google Search Console non si limitano ai bot SEO di Google e possono quindi essere meno utili delle informazioni più esatte che puoi ottenere analizzando i tuoi file di log.

Casi recenti di attività di scansione insolita

Bill esamina tre picchi recenti visibili nelle statistiche di scansione in Google Search Console. Questi corrispondono a grandi eventi che attivano una maggiore attività di scansione.

Picco di indicizzazione mobile First

Il picco del 7 settembre in Google Search Console potrebbe sembrare, all'inizio, non correlato agli eventi sul sito web. Tuttavia, uno sguardo all'analisi del registro in OnCrawl ha fornito indizi:


L'analisi dei file di registro ci consente di vedere la suddivisione dei diversi bot utilizzati da Google per eseguire la scansione della pagina. Diventa chiaro che l'attività del Googlebot desktop è diminuita drasticamente prima di questa data e che questo picco, a differenza dei picchi precedenti e più piccoli, era composto quasi interamente da hit su pagine uniche già indicizzate dal bot di Google mobile.

Un aumento del 50% del traffico organico registrato da Google Analytics ha confermato che questo picco corrisponde all'indicizzazione Mobile First del sito all'inizio di settembre, settimane prima dell'avviso inviato da Google!

Modifica alla struttura dell'URL del sito

A metà agosto, Bill ha apportato modifiche alla struttura del suo URL per renderlo più SEO-friendly.

Google Search Console ha registrato due grandi picchi subito dopo questa modifica, confermando che Google identifica i principali eventi del sito e li utilizza come segnali per eseguire nuovamente la scansione degli URL del sito web.

Quando osserviamo la suddivisione di questi risultati in OnCrawl, diventa evidente che il secondo picco è meno di un picco, ma che l'elevata velocità di scansione delle pagine su questo sito Web continua nel corso di più giorni. È chiaro che Google ha raccolto le modifiche, come Bill è in grado di confermare osservando le differenze nell'attività di scansione nei giorni successivi alle modifiche.

Utili report e funzionalità di OnCrawl per condurre un audit tecnico

SEO Visite e pagine SEO Active

OnCrawl elabora i dati del file di registro per fornire informazioni accurate sulle visite SEO o sui visitatori umani che arrivano dagli elenchi SERP di Google.

Puoi tenere traccia del numero di visite o guardare le pagine attive SEO, che sono singole pagine del sito Web che ricevono traffico organico.

Una cosa che potresti voler esaminare come parte di un audit potrebbe essere il motivo per cui alcune pagine di ranking non ricevono traffico organico (o, in altre parole, non sono pagine attive SEO).

Grado fresco

Metriche come Fresh Rank di OnCrawl forniscono informazioni essenziali. In questo caso: il ritardo medio in giorni tra la prima scansione di una pagina da parte di Google e il momento in cui la pagina riceve la sua prima visita SEO.


Le strategie di promozione dei contenuti e lo sviluppo di backlink possono aiutare a guadagnare traffico più velocemente per una nuova pagina. Alcune pagine del sito in questa verifica, come i post di blog promossi sui social network, hanno guadagnato un grado di freschezza molto più basso.

Il bot colpisce pagine e risorse in base al codice di stato

I bot potrebbero visitare URL che restituiscono errori 404 o 410. Ciò potrebbe riguardare risorse come CSS, JavaScript, PDF o file immagine.

Questi sono elementi su cui vuoi assolutamente indagare durante un audit. Reindirizzare questi URL e rimuovere i collegamenti interni ad essi può fornire rapide vincite.

Durante un controllo, può essere utile annotare gli elementi che dovrebbero essere affrontati, come gli URL che restituiscono errori di stato ai bot.

Rapporti di Esplora dati: rapporti personalizzati

OnCrawl Data Explorer offre filtri rapidi per produrre report che potrebbero interessarti, ma puoi anche creare i tuoi report in base ai criteri che ti interessano. Ad esempio, potresti voler esaminare le pagine attive SEO con rimbalzi e un tempo di caricamento elevato.

Rapporti di Esplora dati: pagine orfane attive

Combinando dati di analisi, scansione e file di registro, OnCrawl può aiutarti a scoprire pagine con visite umane organiche che non sempre apportano valore al tuo sito. Il vantaggio dell'utilizzo dei dati dei file di registro è che puoi scoprire ogni pagina del tuo sito che è stata visitata, comprese le pagine che potrebbero non contenere il codice di Google Analytics.

Bill è stato in grado di identificare le visite organiche SEO sulle pagine dei feed RSS, probabilmente tramite collegamenti da fonti esterne. Queste pagine sono pagine orfane del suo sito; non hanno una pagina "genitore" che si collega a loro. Queste pagine non apportano alcun valore extra alla sua strategia SEO, ma ricevono comunque alcune visite dal traffico organico.

Queste pagine sono ottimi candidati per iniziare a ottimizzare.

Analisi di ricerca per il posizionamento delle parole chiave

I dati per le classifiche possono essere estratti da Google Search Console. Direttamente nella vecchia versione di Google Search Console, puoi andare su Traffico di ricerca, quindi Analisi di ricerca e visualizzare Clic, Impressioni, CTR e Posizioni degli ultimi 90 giorni.

OnCrawl fornisce rapporti chiari su come queste informazioni sono correlate all'intero sito, consentendo di confrontare il numero totale di pagine del sito, il numero di pagine di ranking e il numero di pagine che ricevono clic.

Impressioni, CTR e clic

La segmentazione del sito ti consente di confermare, in un solo colpo d'occhio, quali tipi o gruppi di pagine del tuo sito sono in classifica e su quale pagina dei risultati.

In questo controllo, Bill è in grado di utilizzare la metrica di OnCrawl per individuare i tipi di pagine che tendono a classificarsi bene. Questi sono i tipi di pagine che sa che dovrebbe continuare a produrre per aumentare il traffico verso il sito web.

I clic sulle pagine di ranking sono fortemente correlati alla posizione di ranking: le posizioni superiori a 10 non sono più sulla prima pagina dei risultati di ricerca, a quel punto il numero di clic diminuirà drasticamente per la maggior parte delle parole chiave.

Segmentazione del sito web

La segmentazione di OnCrawl è un modo per raggruppare le tue pagine in set significativi. Mentre viene fornita una segmentazione automatica, puoi modificare i filtri o creare le tue segmentazioni da zero. Utilizzando i filtri del linguaggio di query di OnCrawl, puoi includere o escludere pagine in un gruppo in base a molti criteri diversi.

Sul sito che Bill esamina nel webinar, la segmentazione si basa sulle diverse directory del sito web.

Pagine in struttura > scansionate > classificate > attive

Nel rapporto sulla classifica di OnCrawl, il grafico "Pagine nella struttura > sottoposte a scansione > classificate > attive" può avvisarti dei problemi nel classificare e visitare le tue pagine.

Questo grafico ti mostra:

  • Pagine nella struttura: il numero di pagine che possono essere raggiunte tramite i diversi link presenti nel tuo sito
  • Scansionate: pagine scansionate da Google
  • Classificate: pagine che sono apparse nelle SERP di Google
  • Attivo: pagine che hanno ricevuto visite organiche

Il tuo audit vorrà esaminare i motivi delle differenze tra le barre in questo grafico.

Tuttavia, le differenze tra il numero di pagine nella struttura e il numero di pagine scansionate potrebbero essere intenzionali, ad esempio se impedisci a Google di eseguire la scansione di determinate pagine disabilitando i robot nel file robots.txt. Questo è qualcosa che vuoi verificare durante il tuo audit.

Puoi esaminare questo tipo di dati in OnCrawl facendo clic sul grafico.

Da asporto chiave


I punti chiave di questo webinar includono:

  • Grandi cambiamenti nella struttura di un sito Web possono produrre grandi cambiamenti nell'attività di scansione.
  • Gli strumenti gratuiti di Google segnalano dati aggregati, mediati o arrotondati in modi che possono farli sembrare imprecisi.
  • I file di registro ti consentono di vedere il comportamento reale del bot e le visite organiche. In combinazione con i dati di scansione e il monitoraggio quotidiano, sono un potente strumento per rilevare i picchi.
  • Dati accurati sono necessari per capire perché e cosa è successo, e questo può essere ottenuto solo attraverso un'analisi incrociata di analisi, scansione, classifiche e, in particolare, dati dei file di registro in uno strumento come OnCrawl.

Prova OnCrawl gratuitamente

Sei interessato ad applicare queste tecniche al tuo sito per ottenere informazioni di audit fruibili?

Inizia la tua prova gratuita

Ti sei perso dal vivo? Guarda la replica!

Anche se non sei riuscito a partecipare al webinar dal vivo, o se non sei riuscito a rimanere per l'intera sessione, puoi comunque visualizzare la versione completa.