IA versus humanos: experimento de SEO

La Inteligencia Artificial (IA) está arrasando en el mundo. El lanzamiento de ChatGPT, el modelo de procesamiento del lenguaje natural (NLP) de OpenAI, ha creado un cambio masivo en los negocios, pero conlleva una buena cantidad de preocupaciones.

A muchos les preocupa cómo esta tecnología que mejora progresivamente encaja en un mundo dirigido y mantenido por contenido humano. Esto es comprensible, especialmente considerando cómo las técnicas de marketing como la optimización de motores de búsqueda (SEO) desempeñan un papel importante en el contenido en línea que se puede ver fácilmente y al mismo tiempo permanece relativamente no regulado.

Los especialistas en marketing ya se han sumergido, y algunos expertos en marketing de contenidos han descubierto que el 82% de los especialistas en marketing afirman que el contenido de IA es "tan bueno como el contenido humano".

Pero, ¿dónde se encuentra Google en la gestión de la creciente popularidad de la IA y la producción en masa de contenido generado por ella? ¿Cómo manejan los motores de búsqueda la clasificación del contenido generado por humanos frente al contenido generado por IA?

Reboot, una empresa de marketing online del Reino Unido conocida por sus experimentos que cambian la industria, se propuso responder estas preguntas.

Antes de sumergirnos en el experimento, echemos un vistazo a los componentes.

Optimización de motores de búsqueda (SEO)

La optimización de motores de búsqueda se ha convertido en una frase clave en un imperio en crecimiento construido sobre palabras clave y frases. Las empresas en línea se han centrado en utilizar la ciencia detrás de la optimización del contenido para llevar sus sitios web, artículos o publicaciones de blogs, páginas de destino y otro contenido a la cima de las SERP (páginas de resultados de los motores de búsqueda). ¿Cómo lo hacen?

Se trata de palabras clave de tendencia, formato cuidadoso y metadatos.

Con la IA cada vez más avanzada, el contenido SEO de primer nivel es cada vez más fácil de producir. Los especialistas en marketing pueden proporcionar indicaciones para que los programas de IA:

• Optimizar un artículo
• Implemente prácticas de SEO en un artículo escrito previamente
• Escribe un contenido completo centrado en SEO

Todo esto, en cuestión de segundos, puede reducir significativamente el tiempo dedicado al contenido escrito por humanos y, al mismo tiempo, minimizar los costos generales.

Contenido generado por IA

Los modelos de procesamiento del lenguaje natural (NLP) han comenzado a funcionar con chatbots conversacionales avanzados como ChatGPT y Microsoft Bing AI, ambos capaces de producir cientos de líneas de texto en segundos y revisiones casi instantáneas.

Este software funciona tomando un mensaje del usuario e introduciéndolo en un programa de inteligencia artificial entrenado en grandes cantidades de texto recopilado de fuentes de Internet, libros, revistas, etc.

La predicción de la siguiente palabra se utiliza mediante un sistema de clasificación interno. Esto parece simple, pero el entrenamiento con una cantidad tan enorme de información le permite generar texto complejo, con sonido humano, con una exactitud y precisión increíblemente altas y rápidas.

La postura de Google sobre el contenido generado por IA

La posición de Google sobre el contenido generado por IA establece claramente que el contenido está a la vanguardia del enfoque de la empresa, ya sea generado por humanos o por IA. El contenido creado por IA existe desde hace mucho tiempo (Grammarly es solo un ejemplo) y puede usarse para aumentar la calidad y la eficiencia tanto para lectores como para escritores.

Los desarrolladores de Google también afirman que el contenido de IA no se clasifica de ninguna manera en particular. Se califica con el mismo paradigma que cualquier otro tipo de contenido: “Útil, útil, original y satisface aspectos de EEAT”. Ya sea generado por humanos o por IA, el contenido "ganador" ocupará el puesto más alto según la EEAT.

Pero ¿qué tan cierta es esta afirmación? Esa pregunta fue la base del experimento de Reboot. A través de una investigación profunda, pruebas estadísticas e informes y debates articulados, Reboot buscó responder esa misma pregunta.

IA versus humanos: el experimento de reinicio

El experimento comenzó en los primeros meses de 2023 con la hipótesis de que el contenido generado por IA y por humanos podría clasificarse de manera diferente en los resultados del motor de búsqueda de Google. El equipo de Reboot quería crear un entorno controlado donde todos los aspectos de su contenido fueran iguales, excepto cómo se creó: humano o IA.

Los investigadores utilizaron ChatGPT para crear once palabras sin significado sin historial de búsqueda ni existencia de dominio. Eligieron "flemparooni" como palabra clave en torno a la cual se escribiría el contenido.

Luego, utilizando las diez palabras restantes, desarrollaron e implementaron diez sitios web básicos para alojar los artículos de contenido.

Comenzaron el proceso de redacción después de delinear una guía de siete pasos para promover la replicabilidad y la optimización equitativa en todo el contenido.

Cinco de los redactores de contenido internos de su empresa escribieron cada uno un artículo basado en la palabra clave "flemparooni" y las pautas proporcionadas. Luego, los investigadores utilizaron ChatGPT-4, la última versión de ChatGPT de OpenAI, para proporcionar la palabra clave, las pautas y las indicaciones necesarias para generar cinco artículos que cumplieran con los criterios especificados.

Finalmente, el equipo analizó datos basándose en la información recopilada mediante el seguimiento de la posición de las palabras clave. También realizaron pruebas para determinar la importancia de los resultados.

IA versus humanos: los resultados

Curiosamente, Reboot descubrió que de los diez artículos creados (cinco por humanos y cinco por ChatGPT-4), cuatro de los cinco artículos mejor clasificados fueron generados por humanos, y el único artículo generado por IA en ese grupo ocupó el tercer lugar.

Cuatro de los cinco artículos peor clasificados fueron generados por IA, y el único artículo generado por humanos en ese grupo ocupó el puesto nueve.

Los investigadores concluyeron que el contenido generado por IA tenía una clasificación promedio de 6,6 , mientras que el contenido escrito por humanos tenía una clasificación promedio de 4,4 , lo que demuestra que el contenido creado por humanos tendía a superar al contenido creado por IA. Sin embargo, los datos son tan buenos como su significado, y aquí es donde entra la palabra "Ciencia" en "Ciencia de datos".

^{_{Análisis de datos que compara las clasificaciones de sitios web que alojan contenido generado por humanos versus contenido generado por IA. (Reinicio, 2023)}}

Los investigadores de Reboot probaron los datos utilizando la prueba U de Mann-Whitney.

Omitiendo la compleja palabrería matemática, Mann-Whitney prueba los datos numéricos contra una hipótesis nula, en este caso, que la probabilidad de que el contenido generado por IA y por humanos se clasifiquen por igual es del 100%. Después de algunos cálculos detrás de escena, la prueba arroja un número indicativo de la diferencia en los medios (o números medios) entre las dos poblaciones (contenido generado por IA versus contenido generado por humanos).

Un resultado más alto indica que los sitios web que alojan artículos generados por humanos tienen una clasificación más alta que sus homólogos de IA, y un resultado más bajo indica que los artículos generados por IA tienen una clasificación más alta.

Después de un total de 25 comparaciones, la hipótesis nula fue rechazada aproximadamente el 92% de las veces , lo que nos indica que los resultados del experimento fueron significativos. Esto significa que los resultados que encontraron no ocurrieron por casualidad.

Además, los resultados mostraron que la clasificación tendía a favorecer el contenido generado por humanos sobre el contenido de IA, suponiendo una igualdad total de SEO en todo el contenido.

Conclusión

Los resultados de este experimento son interesantes, especialmente si se consideran las implicaciones.

Las empresas y especialistas en marketing basados ​​en SEO que se centran en ChatGPT y otras herramientas de marketing de IA para maximizar la optimización del contenido pueden ahorrar en los costos generales involucrados en la creación de contenido humano. Pero este experimento muestra que sus competidores pueden mantener una ventaja si se apegan al contenido generado por humanos.

Por supuesto, una teoría es tan buena como su replicabilidad, y la investigación debe continuar para una confirmación más profunda. Sin embargo, los resultados son una buena perspectiva para los creadores de contenido humano y deberían ser una señal para todos aquellos tomadores de decisiones de marketing online que presionan por la automatización total del contenido.

La respuesta se encuentra en algún punto entre la generación de contenido humano y la de IA.

Pero uno no debe sustituir al otro. En cambio, cada uno debe utilizarse en armonía para promover conocimientos y contenidos atractivos de persona a persona y, al mismo tiempo, maximizar la eficiencia a través de la ideación, la descripción y la generación de palabras clave de la IA, entre otras tareas.

Experimentos como el de Reboot muestran que no estamos preparados para una automatización completa, y las empresas que así lo crean probablemente se harán más daño que bien.

Los humanos y la IA deberían trabajar juntos para usted

Su contenido debe estar orientado a usted y a las necesidades de su público objetivo. La IA no puede hacerlo sola y los creadores humanos solo pueden hacer mucho en períodos de tiempo limitados. Scripted es la única plataforma que ofrece contenido humano y de inteligencia artificial. Unificamos los dos de una manera que maximiza la velocidad y la eficiencia y al mismo tiempo brindamos contenido de marca de alta calidad que se destaca. Con un grupo de expertos en la materia (PYME) cuidadosamente seleccionados con conocimientos específicos de la industria y una plataforma única para todas sus necesidades de creación de contenido, los especialistas en marketing no necesitan buscar más. Potenciada por la IA y perfeccionada por el ser humano: cree contenido auténtico con guiones