IA vs. Humanos – Experiência de SEO

A Inteligência Artificial (IA) está conquistando o mundo. O lançamento do ChatGPT, o modelo de Processamento de Linguagem Natural (PNL) da OpenAI, criou uma grande mudança nos negócios, mas com ele vem uma boa dose de preocupações.

Muitos preocupam-se com a forma como esta tecnologia em melhoria progressiva se enquadra num mundo gerido e mantido por conteúdo humano. Isso é compreensível, especialmente considerando como as técnicas de marketing como a otimização de mecanismos de pesquisa (SEO) desempenham um papel significativo no conteúdo on-line que é facilmente visualizável, embora permaneça relativamente não regulamentado.

Os profissionais de marketing já mergulharam de cabeça, com alguns especialistas em marketing de conteúdo descobrindo que 82% dos profissionais de marketing afirmam que o conteúdo de IA é “tão bom quanto o conteúdo humano”.

Mas qual é a posição do Google no gerenciamento da crescente popularidade da IA ​​e na produção em massa de conteúdo gerado por IA? Como os mecanismos de pesquisa lidam com a classificação do conteúdo gerado por humanos versus o conteúdo gerado por IA?

A Reboot, uma empresa de marketing online do Reino Unido conhecida por seus experimentos que mudam o setor, tem como objetivo responder a essas perguntas.

Antes de mergulharmos no experimento, vamos dar uma olhada nos componentes.

Otimização de mecanismos de pesquisa (SEO)

Search Engine Optimization tornou-se uma frase-chave em um império crescente construído sobre palavras-chave e frases. As empresas online têm se concentrado em usar a ciência por trás da otimização de conteúdo para colocar seus sites, artigos ou postagens de blog, páginas de destino e outros conteúdos no topo das SERPs (páginas de resultados de mecanismos de pesquisa). Como eles fazem isso?

É tudo uma questão de palavras-chave populares, formatação cuidadosa e metadados.

Com a IA se tornando cada vez mais avançada, conteúdo de SEO de alto nível está se tornando mais fácil de produzir. Os profissionais de marketing podem fornecer instruções para que os programas de IA:

• Otimize um artigo
• Implemente práticas de SEO em um artigo pré-escrito
• Escreva um conteúdo completo com foco em SEO

Tudo isso, em segundos, pode diminuir significativamente o tempo gasto em conteúdo escrito por humanos, ao mesmo tempo que minimiza os custos indiretos.

Conteúdo gerado por IA

Os modelos de processamento de linguagem natural (PNL) começaram a funcionar com chatbots de conversação avançados, como ChatGPT e Microsoft Bing AI, ambos capazes de produzir centenas de linhas de texto em segundos e revisões quase instantâneas.

Este software funciona recebendo uma solicitação do usuário e inserindo-a em um programa de IA treinado em grandes quantidades de texto coletado de fontes da Internet, livros, revistas, etc.

A previsão da próxima palavra é usada por meio de um sistema de classificação interno. Isso parece simples, mas o treinamento em uma quantidade tão grande de informações permite produzir textos complexos e de aparência humana com exatidão e precisão incrivelmente altas – rápido.

A posição do Google sobre conteúdo gerado por IA

A posição do Google em relação ao conteúdo gerado por IA afirma claramente que o conteúdo está na vanguarda do foco da empresa, seja ele gerado por humanos ou por IA. O conteúdo criado por IA já existe há muito tempo – Grammarly é apenas um exemplo – e pode ser usado para aumentar a qualidade e a eficiência para leitores e escritores.

Os desenvolvedores do Google também afirmam que o conteúdo de IA não é classificado de nenhuma maneira específica. É classificado com o mesmo paradigma de qualquer outro tipo de conteúdo: “Útil, útil, original e que satisfaz os aspectos do EEAT”. Quer seja gerado por humanos ou por IA, o conteúdo “vencedor” terá a classificação mais elevada de acordo com a EEAT.

Mas quão verdadeira é essa afirmação? Essa questão foi a base para o experimento do Reboot. Por meio de pesquisas profundas, testes estatísticos e relatórios e discussões articulados, a Reboot procurou responder exatamente a essa pergunta.

IA vs. Humanos: o experimento de reinicialização

O experimento começou nos primeiros meses de 2023 com a hipótese de que o conteúdo gerado por IA e por humanos poderia ser classificado de forma diferente nos resultados do mecanismo de pesquisa do Google. A equipe Reboot queria criar um ambiente controlado onde todos os aspectos de seu conteúdo fossem iguais, exceto como ele foi criado: humano ou IA.

Os pesquisadores usaram o ChatGPT para criar onze palavras sem sentido, sem histórico de pesquisa ou existência de domínio. Eles escolheram “flemparooni” como palavra-chave em torno da qual o conteúdo seria escrito.

Depois, usando as dez palavras restantes, desenvolveram e implantaram dez sites básicos para hospedar os artigos de conteúdo.

Eles iniciaram o processo de redação após delinear uma diretriz de 7 etapas para promover a replicabilidade e a otimização igualitária em todo o conteúdo.

Cada um dos redatores de conteúdo internos de sua empresa escreveu um artigo baseado na palavra-chave “flemparooni” e nas diretrizes fornecidas. Os pesquisadores então usaram o ChatGPT-4, a versão mais recente do ChatGPT da OpenAI, para alimentar a palavra-chave, as diretrizes e os prompts necessários para produzir cinco artigos que atendessem aos critérios especificados.

Por fim, a equipe analisou os dados com base nas informações coletadas por meio do rastreamento de posição de palavras-chave. Eles também realizaram testes para determinar a significância dos resultados.

IA vs. Humanos: os resultados

Curiosamente, a Reboot descobriu que dos dez artigos criados (cinco por humanos e cinco por ChatGPT-4), quatro dos cinco artigos mais bem classificados foram gerados por humanos, com o único artigo gerado por IA nesse grupo ocupando o terceiro lugar.

Quatro dos cinco artigos mais bem classificados foram gerados por IA, com o único artigo gerado por humanos nesse grupo classificado em nono lugar.

Os pesquisadores concluíram que o conteúdo gerado por IA tinha uma classificação média de 6,6 , enquanto o conteúdo escrito por humanos tinha uma classificação média de 4,4 , mostrando que o conteúdo criado por humanos tendia a superar o conteúdo criado por IA. No entanto, os dados são tão bons quanto o seu significado, e é aí que entra a palavra “Ciência” em “Ciência de Dados”.

^{_{Análise de dados comparando as classificações de sites que hospedam conteúdo gerado por humanos e conteúdo gerado por IA. (Reinicialização, 2023)}}

Os pesquisadores da Reboot testaram os dados usando o teste U de Mann-Whitney.

Omitindo a complexa bobagem matemática, o Mann-Whitney testa os dados numéricos contra uma hipótese nula, neste caso, de que a probabilidade de conteúdo gerado por IA e humano ser classificado igualmente é de 100%. Após alguns cálculos nos bastidores, o teste retorna um número indicativo da diferença nas mídias (ou números intermediários) entre as duas populações (conteúdo gerado por IA versus conteúdo gerado por humanos).

Um resultado mais alto indica que os sites que hospedam artigos gerados por humanos têm uma classificação mais elevada do que seus equivalentes de IA, e um resultado mais baixo indica que os artigos gerados por IA têm uma classificação mais elevada.

Após um total de 25 comparações, a hipótese nula foi rejeitada cerca de 92% das vezes , o que nos diz que os resultados do experimento foram significativos. Isso significa que os resultados encontrados não aconteceram por acaso.

Além disso, os resultados mostraram que a classificação tende a favorecer o conteúdo gerado por humanos em detrimento do conteúdo de IA, assumindo total igualdade de SEO em todo o conteúdo.

Conclusão

Os resultados desta experiência são interessantes, especialmente quando se consideram as implicações.

Empresas e profissionais de marketing baseados em SEO com foco em ChatGPT e outras ferramentas de marketing de IA para maximizar a otimização de conteúdo podem economizar nos custos indiretos envolvidos na criação de conteúdo humano. Mas esta experiência mostra que os seus concorrentes podem manter uma vantagem se se limitarem ao conteúdo gerado por humanos.

Uma teoria é tão boa quanto a sua replicabilidade, é claro, e a investigação deve continuar para uma confirmação mais aprofundada. No entanto, os resultados são uma boa perspectiva para os criadores de conteúdo humano e devem ser uma bandeira para todos os tomadores de decisão de marketing online que pressionam pela automação total do conteúdo.

A resposta está em algum lugar entre a geração de conteúdo humano e de IA.

Mas um não deve substituir o outro. Em vez disso, cada um deve ser utilizado em harmonia para promover conhecimento e conteúdo envolventes entre humanos, ao mesmo tempo que maximiza a eficiência através da concepção, definição e geração de palavras-chave de IA, entre outras tarefas.

Experimentos como o do Reboot mostram que não estamos prontos para a automação completa, e as empresas que pensam que estamos provavelmente farão mais mal do que bem.

Humanos e IA devem trabalhar juntos para você

Seu conteúdo deve ser voltado para você e para as necessidades do seu público-alvo. A IA não pode fazer isso sozinha, e os criadores humanos só podem fazer até certo ponto em períodos limitados de tempo. Scripted é a única plataforma que oferece conteúdo humano e de IA. Unificamos os dois de uma forma que maximiza a velocidade e a eficiência, ao mesmo tempo que fornecemos conteúdo de marca de alta qualidade que se destaca. Com um grupo de especialistas no assunto (PMEs) cuidadosamente selecionados com conhecimento específico do setor e uma plataforma completa para todas as suas necessidades de criação de conteúdo, os profissionais de marketing não precisam procurar mais. IA capacitada e aperfeiçoada pelo ser humano: crie conteúdo autêntico com script