Chatbot-Studie der Leuphana Universität Lüneburg

Challenge

Die Entwicklung wissenschaftlich valider Chatbots stellte mehrere komplexe Herausforderungen dar: Bis dato waren Chatbots in wissenschaftlichen Studien sehr statisch designt und verwendeten vorausgewählte, bereits zurechtgeschriebene Antworten, um Vergleichbarkeit zu erzielen. Diese Vergleichbarkeit ist in der Wissenschaft ein zentrales Kriterium für quantitative Studien – nur so lässt sich vergleichen, inwieweit Unterschiede des Chatbots bei Studierenden verschiedene Wahrnehmungen auslösen.

Solution

Die Leuphana Universität, vertreten durch Prof. Dr. Monika Imschloss und Dr. Lennart Seitz, kam mit der Herausforderung auf Scoreprise.AI zu, ihre Studie technisch begleiten zu lassen. Geprüft werden sollte, inwieweit Chatbots eine starke Variabilität und gleichzeitig Vergleichbarkeit im wissenschaftlichen Kontext aufweisen können.

Die Lösung lag in der Entwicklung von vier Chatbots auf Basis eines 2x2-Designs: langsam & unpersönlich, schnell & persönlich, schnell & unpersönlich sowie langsam & persönlich. Die technische Herausforderung: Der Chatbot durfte nicht willkürlich auf Basis eines Prompts sprechen, sondern musste den User verstehen, sich seine Charakteristika merken, persönlich auf ihn eingehen und seinen Sprachstil adaptieren. Über 500 Studierende waren am Projekt beteiligt und schufen so eine wissenschaftlich valide Datenbasis.

Der Aha-Moment

Der größte Aha-Moment lag in der Erkenntnis, dass eine langsame, durchdachte Antwort einen besseren Impact auf den User haben kann als schnelle Responses. Der User bekommt dadurch das Gefühl vermittelt, dass die AI-Instanz ein wirkliches Verständnis über seine Herausforderungen hat, tatsächlich darüber nachdenkt und eine eigene Lösung entwickelt.

Besonders überraschend: Hohe Schnelligkeit wird heute von AI immer erwartet, ist aber nicht immer die beste Art, mit einem Nutzer zu kommunizieren. Am Ende der Studie erhielt jeder User eine personalisierte Empfehlung für seinen Kurs – zugeschnitten auf seine Interessen und angepasst an seinen Sprachstil.

Outcome

Die Erkenntnisse aus der Leuphana-Studie zeigen deutlich: Erfolgreiche AI-Implementation hängt entscheidend davon ab, wie gut die Kommunikation zwischen Mensch und AI gestaltet wird. Scoreprise.AI hat durch dieses Projekt wertvolle Erfahrungen gesammelt, die direkt in die Entwicklung menschlicher AI-Mitarbeiter einfließen.

Geschwindigkeit der Antworten, Grad der Personalisierung und die Anpassung an individuelle Kommunikationsstile sind entscheidende Faktoren, die Scoreprise.AI durch wissenschaftliche Forschung validiert hat. Durch die Erfahrungen aus über 500 Nutzerinteraktionen weiß Scoreprise.AI, wie AI-Mitarbeiter gestaltet werden müssen, damit sie sich wirklich menschlich anfühlen und erfolgreich in bestehende Teams integriert werden.

← Zurück zu den Referenzen