KI vs. Menschen – SEO-Experiment

Veröffentlicht: 2023-10-19

KI vs. Menschen – SEO-Experiment

Künstliche Intelligenz (KI) erobert die Welt im Sturm. Die Veröffentlichung von ChatGPT, dem Natural Language Processing (NLP)-Modell von OpenAI, hat zu einer massiven Veränderung im Geschäftsleben geführt, bringt aber auch einige Bedenken mit sich.

Viele machen sich Sorgen darüber, wie diese sich ständig verbessernde Technologie in eine Welt passt, die von menschlichen Inhalten regiert und gepflegt wird. Das ist verständlich, insbesondere wenn man bedenkt, dass Marketingtechniken wie Suchmaschinenoptimierung (SEO) eine wichtige Rolle bei Online-Inhalten spielen, die leicht sichtbar sind, aber relativ unreguliert bleiben.

Vermarkter haben bereits den Sprung gewagt: Einige Content-Marketing-Experten haben herausgefunden, dass 82 % der Vermarkter behaupten, KI-Inhalte seien „genauso gut wie menschliche Inhalte“.

Aber wo steht Google bei der Bewältigung der explodierenden Beliebtheit von KI und der Massenproduktion von KI-generierten Inhalten? Wie gehen Suchmaschinen mit dem Ranking von von Menschen erstellten Inhalten im Vergleich zu von KI generierten Inhalten um?

Reboot, ein Online-Marketing-Unternehmen in Großbritannien, das für seine branchenverändernden Experimente bekannt ist, hat es sich zum Ziel gesetzt, diese Fragen zu beantworten.

Bevor wir uns in das Experiment stürzen, werfen wir einen Blick auf die Komponenten.

Suchmaschinenoptimierung (SEO)

Suchmaschinenoptimierung ist zu einem Schlüsselbegriff in einem wachsenden Imperium geworden, das auf Schlüsselwörtern und Phrasen basiert. Online-Unternehmen haben sich darauf konzentriert, die Wissenschaft hinter der Optimierung von Inhalten zu nutzen, um ihre Websites, Artikel oder Blogbeiträge, Zielseiten und andere Inhalte an die Spitze der SERPs (Suchmaschinen-Ergebnisseiten) zu bringen. Wie machen sie das?

Es geht um trendige Schlüsselwörter, sorgfältige Formatierung und Metadaten.

Da die KI immer fortschrittlicher wird, wird es immer einfacher, erstklassige SEO-Inhalte zu produzieren. Vermarkter können KI-Programmen Aufforderungen geben, um:

  • Optimieren Sie einen Artikel
  • Implementieren Sie SEO-Praktiken in einen vorgefertigten Artikel
  • Schreiben Sie einen kompletten SEO-fokussierten Inhalt

All dies kann innerhalb von Sekunden den Zeitaufwand für von Menschen geschriebene Inhalte erheblich reduzieren und gleichzeitig die Gemeinkosten minimieren.

KI-generierte Inhalte

Modelle zur Verarbeitung natürlicher Sprache (Natural Language Processing, NLP) haben mit fortschrittlichen Konversations-Chatbots wie ChatGPT und Microsoft Bing AI den Durchbruch geschafft, die beide in der Lage sind, Hunderte von Textzeilen in Sekunden zu erstellen und nahezu augenblickliche Überarbeitungen vorzunehmen.

Diese Software funktioniert, indem sie eine Eingabeaufforderung des Benutzers aufnimmt und sie in ein KI-Programm einspeist, das auf großen Textmengen aus Internetquellen, Büchern, Zeitschriften usw. trainiert ist.

Die Vorhersage des nächsten Wortes erfolgt über ein internes Ranking-System. Das scheint einfach zu sein, aber das Training auf solch einer riesigen Informationsmenge ermöglicht es, komplexe, menschlich klingende Texte mit unglaublich hoher Genauigkeit und Präzision auszugeben – und zwar schnell.

Googles Haltung zu KI-generierten Inhalten

Die Position von Google zu KI-generierten Inhalten besagt eindeutig, dass Inhalte im Vordergrund des Unternehmensfokus stehen, unabhängig davon, ob sie von Menschen oder KI generiert wurden. Durch KI erstellte Inhalte gibt es schon seit langem – Grammarly ist nur ein Beispiel – und können zur Steigerung der Qualität und Effizienz für Leser und Autoren gleichermaßen eingesetzt werden.

Google-Entwickler geben außerdem an, dass KI-Inhalte nicht auf eine bestimmte Art und Weise eingestuft werden. Es wird nach dem gleichen Paradigma bewertet wie jede andere Art von Inhalt: „Nützlich, hilfreich, originell und erfüllt Aspekte von EEAT.“ Ob von Menschen oder KI generiert, der „Gewinner“-Inhalt wird laut EEAT den höchsten Rang einnehmen.

Doch wie wahr ist diese Behauptung? Diese Frage war die Grundlage für das Experiment von Reboot. Durch gründliche Recherche, statistische Tests sowie artikulierte Berichterstattung und Diskussion versuchte Reboot, genau diese Frage zu beantworten.

KI vs. Menschen: Das Reboot-Experiment

Das Experiment begann in den ersten Monaten des Jahres 2023 mit der Hypothese, dass von KI und von Menschen erstellte Inhalte in den Suchmaschinenergebnissen von Google unterschiedlich eingestuft werden könnten. Das Reboot-Team wollte eine kontrollierte Umgebung schaffen, in der alle Aspekte ihres Inhalts gleich sind, außer wie er erstellt wurde: Mensch oder KI.

Die Forscher verwendeten ChatGPT, um elf bedeutungslose Wörter ohne Suchverlauf oder Domänenexistenz zu erstellen. Sie wählten „Flemparooni“ als Schlüsselwort, um das herum der Inhalt geschrieben werden sollte.

Anschließend entwickelten und implementierten sie unter Verwendung der verbleibenden zehn Wörter zehn grundlegende Websites zum Hosten der Inhaltsartikel.

Sie begannen mit dem Schreibprozess, nachdem sie eine 7-stufige Richtlinie zur Förderung der Reproduzierbarkeit und gleichmäßigen Optimierung aller Inhalte skizziert hatten.

Fünf interne Content-Autoren ihres Unternehmens verfassten jeweils einen Artikel basierend auf dem Schlüsselwort „Flemparooni“ und den bereitgestellten Richtlinien. Anschließend verwendeten die Forscher ChatGPT-4, die neueste Version von ChatGPT von OpenAI, um das Schlüsselwort, die Richtlinien und die Eingabeaufforderungen einzugeben, die für die Ausgabe von fünf Artikeln erforderlich sind, die die angegebenen Kriterien erfüllen.

Abschließend analysierte das Team Daten basierend auf Informationen, die durch die Verfolgung der Keyword-Position gesammelt wurden. Sie führten auch Tests durch, um die Aussagekraft der Ergebnisse zu ermitteln.

KI vs. Menschen: Die Ergebnisse

Interessanterweise stellte Reboot fest, dass von den zehn Artikeln (fünf von Menschen und fünf von ChatGPT-4) vier der fünf am besten bewerteten Artikel von Menschen erstellt wurden, wobei der einzige KI-generierte Artikel in dieser Gruppe den dritten Platz belegte.

Vier der fünf am schlechtesten bewerteten Artikel waren KI-generiert, wobei der einzige von Menschen erstellte Artikel in dieser Gruppe auf Platz neun landete.

Die Forscher kamen zu dem Schluss, dass von KI generierte Inhalte einen durchschnittlichen Rang von 6,6 hatten , während von Menschen geschriebene Inhalte einen durchschnittlichen Rang von 4,4 hatten , was zeigt, dass von Menschen erstellte Inhalte tendenziell höher bewertet sind als von KI erstellte Inhalte. Daten sind jedoch nur so gut wie ihre Bedeutung, und hier kommt das Wort „Wissenschaft“ in „Data Science“ ins Spiel.

Mensch-gegen-KI-Experiment-32 0f1eb7bc-92b7-43c0-93d0-eb3553664739 1695566675

Datenanalyse zum Vergleich der Rankings von Websites, die von Menschen erstellte Inhalte hosten, mit denen von KI-generierten Inhalten. (Neustart, 2023)

Reboot-Forscher testeten die Daten mit dem Mann-Whitney-U-Test.

Unter Weglassung des komplexen mathematischen Hokuspokus testet Mann-Whitney die numerischen Daten anhand einer Nullhypothese. In diesem Fall beträgt die Wahrscheinlichkeit, dass KI- und von Menschen generierte Inhalte gleichwertig sind, 100 %. Nach einigen Berechnungen hinter den Kulissen gibt der Test eine Zahl zurück, die den Unterschied in den Medien (oder mittleren Zahlen) zwischen den beiden Populationen (KI-generierte vs. von Menschen generierte Inhalte) angibt.

Ein höheres Ergebnis bedeutet, dass Websites, die von Menschen erstellte Artikel hosten, einen höheren Rang haben als ihre KI-Gegenstücke, und ein niedrigeres Ergebnis bedeutet, dass von KI erstellte Artikel einen höheren Rang haben.

Nach insgesamt 25 Vergleichen wurde die Nullhypothese in etwa 92 % der Fälle verworfen , was uns zeigt, dass die Ergebnisse des Experiments signifikant waren. Dies bedeutet, dass die gefundenen Ergebnisse kein Zufall waren.

Darüber hinaus zeigten die Ergebnisse, dass das Ranking tendenziell von Menschen erstellte Inhalte gegenüber KI-Inhalten bevorzugt, wobei von völliger SEO-Gleichheit bei allen Inhalten ausgegangen wird.

Abschluss

Die Ergebnisse dieses Experiments sind interessant, insbesondere wenn man die Implikationen berücksichtigt.

SEO-basierte Unternehmen und Vermarkter, die sich auf ChatGPT und andere KI-Marketingtools konzentrieren, um die Inhaltsoptimierung zu maximieren, können die Gemeinkosten einsparen, die mit der Erstellung menschlicher Inhalte verbunden sind. Dieses Experiment zeigt jedoch , dass ihre Konkurrenten einen Vorsprung behalten können, wenn sie bei von Menschen erstellten Inhalten bleiben.

Eine Theorie ist natürlich nur so gut wie ihre Reproduzierbarkeit, und die Forschung sollte zur tiefergehenden Bestätigung fortgesetzt werden. Die Ergebnisse sind jedoch ein guter Ausblick für menschliche Content-Ersteller und sollten ein Zeichen für alle Online-Marketing-Entscheidungsträger sein, die auf eine vollständige Content-Automatisierung drängen.

Die Antwort liegt irgendwo zwischen der Generierung von Inhalten durch Menschen und KI.

Aber das eine sollte das andere nicht ersetzen. Stattdessen sollte jeder von ihnen harmonisch genutzt werden, um ansprechendes Wissen und Inhalte von Mensch zu Mensch zu fördern und gleichzeitig die Effizienz durch KI-Ideenfindung, Gliederung und Schlüsselwortgenerierung und andere Aufgaben zu maximieren.

Experimente wie die von Reboot zeigen, dass wir für eine vollständige Automatisierung noch nicht bereit sind, und Unternehmen, die davon ausgehen, dass wir es sind, werden sich wahrscheinlich mehr schaden als nützen.

Menschen und KI sollten für Sie zusammenarbeiten

Ihre Inhalte sollten auf Sie und die Bedürfnisse Ihrer Zielgruppe zugeschnitten sein. KI allein kann das nicht schaffen und menschliche Schöpfer können nur begrenzte Zeit leisten. Scripted ist die einzige Plattform, die sowohl menschliche als auch KI-Inhalte anbietet. Wir vereinen beides auf eine Weise, die Geschwindigkeit und Effizienz maximiert und gleichzeitig hochwertige Markeninhalte bereitstellt, die auffallen. Mit einem Pool sorgfältig ausgewählter Fachexperten (KMU) mit branchenspezifischem Wissen und einer One-Stop-Plattform für alle Ihre Anforderungen an die Content-Erstellung müssen Vermarkter nicht weiter suchen. KI-fähig, menschlich perfektioniert: Erstellen Sie authentische Inhalte mit Scripted