Ein KI-Karrierecoach für eine wissenschaftliche Studie

Für eine Studie an einer deutschen Universität habe ich einen Chatbot gebaut, der ein festgelegtes Coaching-Gespräch führt, persönlich nachfragt und in den 13 bisher bewerteten Testgesprächen keine Pflichtfrage ausgelassen hat.

Kosten je Testgespräch nach Optimierung (Einzellauf, Oktober 2026)
−54 %
Versionen in zwölf Tagen, jede automatisch geprüft
25
fehlende Pflichtfragen in 13 bewerteten Testgesprächen (Stand 20.10.2026)
0

Ausgangslage

Ein Forschungsteam untersucht, wie gut ein Chatbot ein Karrierecoaching führen kann. Grundlage ist ein am Lehrstuhl entwickelter Gesprächsleitfaden. Fragen, Skalen und Reihenfolge müssen bei allen Teilnehmenden gleich sein. Trotzdem soll sich das Gespräch persönlich anfühlen und bezahlbar bleiben.

Aufgabe

Einen Chatbot bauen, der jede Pflichtfrage stellt und die Antwort richtig speichert. Pflichtfragen sind Fragen, die in jedem Gespräch vorkommen müssen. Dazu soll der Bot bei Unklarheit nachfragen, Korrekturen übernehmen und mehrere Studienbedingungen vergleichbar abbilden.

Vorgehen

Ein erster Pilot lief im Frühjahr und Sommer 2026 und wurde mit dem Forschungsteam getestet. Für die Hauptstudie habe ich den Bot neu aufgebaut. Eine Software führt den Ablauf und speichert jede Antwort. Ein Sprachmodell wertet die Antwort aus, ein zweites formuliert die Reaktion. So kann das Modell frei formulieren, ohne dass eine Pflichtfrage verloren geht.

Getestet wird mit erfundenen Personen, die ein KI-Modell spielt. Ein anderes Modell bewertet jedes Gespräch, ohne die Version zu kennen. Echte Teilnehmerdaten kommen in Tests nicht vor. Vor jedem Livetest wird die Version eingefroren, automatisch geprüft und von einem getrennten KI-Prüfer abgenommen. Kosten und Umfang jedes Tests lege ich vorher fest.

Entwickelt habe ich mit mehreren KI-Agenten (Claude Code und Codex), die parallel in getrennten Bereichen arbeiten und sich gegenseitig prüfen.

Ergebnis

  • 25 Versionen des Gesprächskerns zwischen dem 9. und 20. Oktober 2026; die neuesten bestehen jeweils über 600 automatische Prüfungen.
  • Kosten je Testgespräch von durchschnittlich 2,83 US-Dollar (7 Referenzgespräche) auf 1,31 US-Dollar in einem einzelnen Lauf gesenkt. Der Hebel: Wiederkehrende Teile der Anfrage speichert der Anbieter zwischen, und der Bot schickt nur den nötigen Kontext mit. Spätere Versionen mit neuen Inhalten lagen je nach Gesprächslänge bei 1,37 bis 2,25 US-Dollar.
  • Keine fehlende Pflichtfrage in 13 automatisch bewerteten Testgesprächen, Wartezeit je Antwort im Median rund 9 Sekunden.
  • Offen ist der natürliche Gesprächsfluss; daran arbeitet die nächste Version. Die Studie selbst hat noch nicht begonnen.

Was das für Sie heißt

Sie brauchen einen Chatbot für eine Studie oder Ihre Praxis? Dann bekommen Sie früh einen Stand zum Ausprobieren und gemessene Kosten je Gespräch, bevor es losgeht. Feste Abläufe wie Aufnahmefragen kann der Bot einhalten; das prüfen wir vor dem Start in Tests. Mit echten Menschen spricht er erst, wenn Sie ihn freigeben.

Eingesetzt

  • Python
  • Claude Sonnet 5.5 und Claude Haiku 5.5 (Anthropic), GPT-6.1 Sol (OpenAI), über OpenRouter
  • Hugging Face Spaces mit Gradio (Pilot), Anbindung an ein Befragungstool
  • Claude Code und Codex (Entwicklung)

Stand der Zahlen: 20.10.2026. Die Testreihe läuft noch; Zahlen und Datum werden nach Abschluss aktualisiert.

Paket „Prototyp für Forschung und Lehre“

Erzählen Sie mir von Ihrem Vorhaben

Zwei, drei Sätze reichen: Was haben Sie vor, bis wann, und was gibt es schon?

jonas@wuensch-digital-solutions.com