In einer jüngsten Studie haben Kognitionswissenschaftler der University of California in San Diego herausgefunden, dass das KI-Modell GPT-4 von OpenAI den Turing-Test bestanden hat. Dieser Test, der nach dem britischen Mathematiker und Informatiker Alan Turing benannt ist, dient seit 1950 als Maßstab dafür, ob eine Maschine in der Lage ist, menschliche Gespräche zu imitieren. Aber was bedeutet das wirklich? Zeit, den Turing-Test und die Ergebnisse dieser Studie etwas genauer unter die Lupe zu nehmen.

GPT-4: Mensch oder Maschine?

In einer Online-Simulation auf der Webseite turingtest.live bewerteten 54 Prozent der knapp 500 Teilnehmer das KI-Modell GPT-4 als menschlich. Zum Vergleich: Sein Vorgängermodell GPT-3.5 erreichte eine Erfolgsquote von 50 Prozent. Interessanterweise wurden echte Menschen von 67 Prozent der Probanden korrekt als solche erkannt, während das historische Programm Eliza, entwickelt 1966 von Joseph Weizenbaum, nur von 22 Prozent der Teilnehmer als menschlich eingestuft wurde.

Der Turing-Test im Wandel der Zeit

Der Turing-Test ist seit Jahrzehnten ein heiß diskutiertes Thema in der Informatik und Künstlichen Intelligenz. Ursprünglich als „Imitationsspiel“ vorgestellt, geht es darum, dass ein menschlicher „Richter“ in einem Gespräch nicht zuverlässig unterscheiden kann, ob er mit einem Menschen oder einer Maschine spricht. Besteht eine Maschine diesen Test in 50 Prozent der Fälle, gilt sie als intelligent.

In der aktuellen Studie interagierten menschliche Vernehmer mit verschiedenen „Zeugen“ – darunter Menschen, GPT-4, GPT-3.5 und Eliza. Die Verhöre liefen über eine Messaging-App und dauerten jeweils fünf Minuten. Die Teilnehmer wurden zufällig den Rollen des Richters oder des Zeugen zugewiesen. Insgesamt nahmen 402 Personen an der Studie teil, mit einer ausgewogenen Verteilung hinsichtlich Geschlecht und Alter.

Der Charme der Imperfektion

Ein interessanter Aspekt der Studie war die Anpassung der Eingabeaufforderungen (Prompts) für GPT-4. Die Wissenschaftler modifizierten die Prompts, um das Modell menschlicher erscheinen zu lassen. Es sollte sich wie ein junger Mensch verhalten, der das Spiel nicht allzu ernst nimmt, Umgangssprache verwendet und gelegentlich Rechtschreib- und Grammatikfehler macht. Zudem sollte es nicht allzu viel Wissen demonstrieren, besonders nicht in Bereichen wie Sprachen und Mathematik.

Die Macht des Sprachstils

Die Strategien und Begründungen der Vernehmer waren ebenfalls aufschlussreich. 36 Prozent der Vernehmer stellten Fragen zu persönlichen Details oder täglichen Aktivitäten, während 25 Prozent sozial-emotionale Fragen stellten, beispielsweise nach Meinungen und Humor. Die häufigsten Gründe für ihre Entscheidungen (43 Prozent) bezogen sich auf den Sprachstil, einschließlich Rechtschreibung, Grammatik und Tonfall. Weitere 24 Prozent bezogen sich auf sozioemotionale Faktoren wie Sinn für Humor oder Persönlichkeit.

Eine Welt voller Möglichkeiten und Herausforderungen

Die Ergebnisse der Studie deuten darauf hin, dass moderne KI-Systeme zunehmend in der Lage sind, menschliche Interaktionen überzeugend zu imitieren. Dies birgt sowohl Chancen als auch Risiken. Auf der einen Seite könnten solche Systeme in verschiedenen Bereichen, von Kundenservice bis hin zu persönlichen Assistenten, enorme Vorteile bieten. Auf der anderen Seite warnen die Forscher, dass Täuschungen durch aktuelle KI-Systeme möglicherweise unentdeckt bleiben und weitreichende wirtschaftliche und soziale Folgen haben könnten.

Fazit: Die Zukunft der KI im Dialog

Die Studie von Bergen und Jones zeigt, dass wir uns in einer spannenden Zeit befinden, in der die Grenzen zwischen Mensch und Maschine zunehmend verschwimmen. Ob dies eine positive Entwicklung ist, bleibt abzuwarten. Sicher ist jedoch, dass die Diskussionen über die Rolle und Verantwortung von KI-Systemen in unserer Gesellschaft weiter an Fahrt gewinnen werden. Und wer weiß, vielleicht werden wir in naher Zukunft häufiger auf KI-Modelle stoßen, die uns in Gesprächen täuschend echt begegnen – und das nicht nur in wissenschaftlichen Studien, sondern auch im Alltag.