Cinco maneiras de melhorar sua análise de log de SEO com a integração Splunk do OnCrawl

Publicados: 2019-01-03

O OnCrawl lançou recentemente uma integração do Splunk para facilitar o monitoramento de log para usuários do Splunk. Descobrimos que as empresas usam nossa integração Splunk para dois propósitos principais: automação de processos e controle de segurança elevado. Mas as vantagens da ferramenta não param por aí. Aqui estão cinco maneiras de usar a integração do OnCrawl Splunk para melhorar seu SEO técnico.

Análise de log de SEO: o básico

O que é análise de log de SEO?

Seus arquivos de log representam todas as atividades em seu site conforme registradas pelo próprio servidor do site. É a fonte de informação mais completa e confiável sobre o que acontece em seu site. Isso inclui o número e a frequência de acessos de bot, o número e a frequência de acessos orgânicos de SEO provenientes de SERPs, detalhamento por tipo de dispositivo (desktop x celular) ou por tipo de URL (página x recurso), tamanhos de página precisos e status HTTP real códigos.

Algumas das muitas vantagens fornecidas pela análise de log de SEO:

  • Detectar picos ou alterações no comportamento de rastreamento que indicam modificações na forma como seu site é tratado pelo Google
  • Saber quanto tempo, em média, leva para que novas páginas sejam indexadas e recebam os primeiros visitantes orgânicos
  • Monitorando como a atividade do bot e do usuário afeta as classificações de uma página
  • Entendendo como o comportamento do bot e do usuário se correlaciona com outros fatores de SEO

O que é Splunk?

Splunk é uma solução empresarial para agregação de dados de máquina. Capaz de indexar e gerenciar dados de várias fontes em escala, ele inclui funções para processamento de log do servidor para fins de segurança e relatórios do site.

Algumas das vantagens do Splunk:

  • Indexação e busca de correlação de dados aprimorada
  • Recursos de detalhamento e pivô para melhores relatórios
  • Alertas em tempo real
  • Painéis de dados
  • Altamente escalável
  • Opções de implantação flexíveis

Monitoramento de log no Splunk

Os usuários do Splunk se beneficiam de uma integração OnCrawl para conectar dados de log do servidor gerenciados no Splunk com dados de SEO na plataforma OnCrawl.

Analisador de registro do Oncrawl

Análise de arquivo de log para monitoramento de bot e otimização de orçamento de rastreamento. Detecte problemas de integridade do site e melhore sua frequência de rastreamento.
Saber mais

Melhorando seu SEO técnico com OnCrawl + Splunk

1. Use logs para uma análise aprofundada de SEO

O Splunk prova a capacidade de agregar, pesquisar, monitorar e configurar alertas para dados de log. Ele analisa e reindexa o conteúdo nos logs do servidor. Usando poderosa pesquisa e filtros, ele fornece respostas a perguntas sobre os dados em seus arquivos de log. Esta etapa de processamento fornece estatísticas para tendências reveladas nos dados de log.

Quando você deseja aplicar isso aos dados de SEO, no entanto, é melhor começar com os dados brutos. E é exatamente isso que a integração OnCrawl Splunk faz.

Em vez de apenas mostrar estatísticas separadas para dados de log, isso permite integrar informações de logs com todas as outras fontes de dados na plataforma OnCrawl. Por sua vez, isso permite que você examine as relações entre as métricas de SEO e as informações sobre o comportamento do usuário e do bot em seus arquivos de log.

Número de visitas orgânicas por profundidade de cliques na página.

Essa análise de dados cruzados pode incluir eixos úteis para SEO:

  • Detalhamento do comportamento de rastreamento por bots individuais
  • Tempo entre o primeiro rastreamento e a primeira visita orgânica
  • Comparação entre páginas veiculadas para usuários e bots e páginas veiculadas durante um rastreamento de auditoria
  • Descoberta de páginas órfãs
  • Correlações entre frequência de rastreamento e classificação, impressões, CTR
  • Influência da estratégia de links internos na atividade do usuário/bot
  • Relação entre a profundidade de cliques da página e a atividade do usuário/bot
  • Relação entre a popularidade da página interna e a atividade do usuário/bot
  • Detalhamento da atividade de usuários e bots em páginas agrupadas por desempenho de SEO

2. Facilite a configuração

Se você precisa ou não de automação ou controles mais refinados para segurança de dados, se você for um usuário do Splunk, você
como é simples de configurar.

Se você não é um administrador de sistema, configurar o monitoramento de log para SEO pode parecer uma tarefa complicada.

Nossa sugestão é simplesmente pular as partes difíceis . Agora você pode configurar tudo diretamente no Splunk e usar a chave gerada para criar a conexão com o OnCrawl.

É isso. Você está pronto para ir. Não poderia ser mais fácil.

3. Aproveite a automação de processos com o Splunk

O processo manual de uso de dados de log coletados no Splunk requer várias etapas:

  • Crie filtros para pesquisar a seleção correta de dados de log
  • Criar uma pesquisa salva
  • Configure a automação para executar a pesquisa
  • Saída para CSV
  • Conecte-se à sua instância do Splunk em SSH
  • Navegue até a pasta de saída CSV
  • Transfira o arquivo para o seu computador
  • Conecte-se ao espaço ftp do OnCrawl
  • Transfira o arquivo para o OnCrawl…

Esse processo deve ser repetido regularmente para evitar lacunas em seus dados de log. Muitas vezes isso se torna uma tarefa diária.

Se você optar por usar a integração do Splunk para OnCrawl, não precisará mais iniciar a tarefa regularmente . Você só precisa configurar o processo (e, como mencionado anteriormente, não poderia ser mais fácil). Você não precisa mais se preocupar em lançar um script – ou, pior, uma série de ações manuais – todos os dias; a integração trata disso para você.

4. Proteja seu processo

Proteja-se da perda de dados quando houver um problema. Como o monitoramento de logs depende de um fluxo contínuo de dados , as lacunas podem levar a conclusões incorretas. Você nunca deveria ter que fazer perguntas como: a aparente ausência de visitas orgânicas esta manhã é devido a algo que aconteceu no Google, ou estou apenas perdendo os dados?

A integração OnCrawl Splunk protege você caso seu servidor esteja inativo ou a conexão seja perdida, e evita erros humanos quando você não tem tempo ou simplesmente esquece de fazer upload de dados. Se não conseguirmos nos conectar ao servidor, isso não causará lacunas em seus dados; vamos apenas coletá-lo um pouco mais tarde. Se você encontrar um conjunto de dados de uma data anterior que esqueceu de adicionar ao Splunk, a integração do OnCrawl também o coletará automaticamente.

5. Assuma o controle da segurança dos dados

No OnCrawl, levamos a segurança de seus dados muito a sério.

Como sempre, os dados confidenciais em seus logs são mantidos onde você os coloca em seu espaço FTP privado e seguro e nunca são disponibilizados em outro lugar. Por exemplo, os únicos dados pessoais que processamos são endereços IP ao validar a autenticidade das visitas do Googlebot. Não mantemos nenhum registro dos endereços IP usados ​​– apenas o resultado da validação. Se necessário, você pode remover informações confidenciais disponibilizadas para análise a qualquer momento removendo arquivos do seu espaço FTP.

A integração para o Splunk vai ainda mais longe. Garantimos que você mantém o controle de seus dados durante todo o processo. Você define os direitos de acesso, os dados a serem compartilhados e a frequência das atualizações no OnCrawl. Quando você compartilha dados com o OnCrawl por meio da integração do Splunk, usamos protocolos padrão e seguros para se comunicar com o Splunk, protegidos por uma senha e uma chave que você configura.

Como a configuração é feita no Splunk, o OnCrawl nunca vê nada que você não nos permita ver. Você escolhe quais informações você compartilha com o OnCrawl . Além disso, como você gerencia a configuração, se houver alterações no processo de registro ou nos padrões da sua empresa, você poderá fazer alterações a qualquer momento.