Metaskills
FORSCHUNG · DIGITAL TWIN · METHODIK

Vom Gespräch zum Profil: Fakten statt Eindrücke

Ein Kompetenzprofil ist nur dann aussagekräftig, wenn sich feststellen lässt, aus welchen Elementen es sich zusammensetzt. Auf dieser Seite wird beschrieben, was das Bewertungsmodul als Nachweis für das Vorhandensein einer bestimmten Kompetenz ansieht, was nicht als Nachweis gilt und warum ein einzelnes erfolgreiches Gespräch nicht ausreicht, um das Profil zu beeinflussen.

Metaskills Bewertungsmethodik, 2026

MethodikMetaskillsMethodikbeschreibungMethodischer Hinweis - Teil der Reihe Digital Twin

Was gilt als nachweisbares Ereignis?

Die Einheit, mit der der Motor arbeitet, ist kein Gesamteindruck des Gesprächs. Es handelt sich um ein Belegereignis: einen bestimmten Moment im Transkript, in dem etwas, das die Person getan hat, eine Handlungskompetenz demonstriert - zitierfähig und lokalisierbar. Eine Regel steht über allem anderen auf dieser Seite: Das bloße Auftreten eines Verhaltens reicht nicht aus. Jemand kann sich entschuldigen, eine klärende Frage stellen oder ein Gefühl benennen - doch nichts davon zählt, wenn es im falschen Moment erfolgte, an der gegenüberliegenden Person vorbeiging oder erst nach einem Anstoß dazu erfolgte. Deshalb durchläuft jedes Belegereignis eine Qualitätsbewertung und wird nicht einfach nur abgehakt.

Vier Dinge, nach denen wir fragen jedes Beweisstück

Spontaneität

Ist das Verhalten von selbst aufgetreten oder erst, nachdem der Avatar expliziten Druck ausgeübt hat? Beides wird erfasst. Die beiden Fälle bedeuten nicht dasselbe.

Zeitplanung

War das Gespräch bereits an einem Punkt angelangt, an dem es den Ausgang noch hätte beeinflussen können? Der richtige Satz, der drei Minuten zu spät kommt, führt zu einem anderen Ergebnis als der richtige Satz, der rechtzeitig kommt.

Auf die andere Person zugeschnitten

Wurde der Stil auf die tatsächlich Anwesenden abgestimmt - darauf, was sie emotional brauchten und wie viele Details sie verkraften konnten? Eine gut formulierte Erklärung, die sich an die falsche Person richtet, ist keine gute Kommunikation.

Verhältnismäßigkeit

War es vielleicht zu viel des Guten? Übermäßiges Einfühlungsvermögen untergräbt die Klarheit ebenso zuverlässig, wie übermäßige Durchsetzungskraft die Spannungen verschärft. Mehr von einer guten Eigenschaft führt nicht automatisch zu einem besseren Ergebnis.

Bestimmte Verhaltensweisen begrenzen das Ergebnis

Nicht alles in einem Gespräch zählt gleich viel. Eine definierte Reihe destruktiver Verhaltensweisen wirkt eher als Begrenzer denn als Abzug - Verhaltensweisen, die dem Gegenüber oder der Arbeitsbeziehung schaden, anstatt lediglich nicht hilfreich zu sein. Welche Verhaltensweisen zu dieser Reihe gehören, ist Teil des Modells und bleibt intern; das Prinzip ist der Teil, der es wert ist, veröffentlicht zu werden. Tritt eines dieser Verhaltensweisen in einem entscheidenden Moment des Szenarios auf, begrenzt es die für die betreffende Kompetenz erreichbare Punktzahl, und positives Verhalten an anderer Stelle im selben Gespräch kann dies nicht wieder ausgleichen. Dies ist beabsichtigt. In einem realen klinischen oder Führungsgespräch wird ein schädlicher Schritt nicht durch fünf gute Schritte ausgeglichen, und eine Bewertung, die so tun würde, als wäre dies der Fall, würde die falsche Lektion vermitteln.

Wie zuverlässig das Profil ist, laut ausgesprochen

1

Unzureichende Daten

Zu wenige Beispiele oder ausschließlich Beispiele aus ein und derselben Situation. Die Kompetenz wird als noch nicht bewertbar ausgewiesen. Wir ziehen es vor, eine Lücke aufzuzeigen, anstatt eine Zahl anzugeben, auf die sich niemand verlassen sollte.

2

Sich abzeichnendes Muster

Das Verhalten ist in mehr als einem Kontext aufgetreten. Das reicht für ein vorläufiges Feedback, das auch als solches gekennzeichnet ist - wobei die eingeschränkte Zuverlässigkeit im Bericht selbst erwähnt und nicht in einer Fußnote versteckt wird.

3

Validiertes Muster

Wiederholt in mehreren deutlich unterschiedlichen Kontexten, darunter auch schwierige Situationen und nicht nur angenehme. An diesem Punkt lohnt es sich, die Weiterentwicklung anhand dieses Profils zu planen.

4

Unter Druck stabil

Dieses Verhalten zeigt sich auch in angespannten Gesprächen und angesichts aktiven Widerstands seitens des Avatars, ohne dass dabei die Qualität leidet. Der höchste Status, den das Modell zuweist, und zugleich der seltenste.

Warum wir nicht annehmen im Durchschnitt

Dem Algorithmus ist es ausdrücklich untersagt, einen einfachen arithmetischen Mittelwert aus den Sitzungsbewertungen zu berechnen. Ein Durchschnitt aus einer starken Leistung in einem einfachen Gespräch und einer schwachen Leistung unter Druck ergibt einen mittelmäßigen Wert, der keines von beiden beschreibt, und verschleiert das Einzige, was wirklich von Bedeutung ist: welche Situationen diese Person bewältigt und welche nicht. Stattdessen betrachtet die Aggregation das Muster - wie viele Belege vorliegen, wie vielfältig die Kontexte sind, wie schwierig die Szenarien waren und ob die Qualität auch dann noch stimmt, wenn das Gespräch anspruchsvoll wird. Kontextvielfalt ist eine Voraussetzung, kein Bonus: Ein Verhalten, das nur in einer Beziehungsart und bei einer Art von Gesprächspartner bestätigt wird, wird nicht zu einem bestätigten Muster, egal wie oft es sich dort wiederholt. Vor all dem kommt noch ein weiterer Filter zum Einsatz. Geführte Übungen, bei denen der Lernende während des Gesprächs Hinweise erhält, werden aus den Bewertungsdaten ausgeschlossen. Übungen dienen dem Lernen; es würde das Profil überbewerten, wenn sie mitgezählt würden.

Zwei Schichten und eine harte Grenze

Die Bewertung erfolgt in zwei getrennten Ebenen. Die erste analysiert ein abgeschlossenes Gespräch und führt keine weiteren Schritte durch: Sie vergleicht das Transkript mit dem Szenario und dem Profil des Avatars und liefert strukturierte Belegereignisse. Es ist nicht zulässig, Rückschlüsse auf die Person zu ziehen. Die zweite Ebene arbeitet über viele Gespräche hinweg. Sie sucht nach Mustern, einschließlich der Wechselwirkung zwischen Kompetenzen - etwa wenn starkes aktives Zuhören ein tatsächliches Defizit an Durchsetzungsfähigkeit oder Entscheidungsfreudigkeit stillschweigend überdeckt -, und genau diese Ebene weist den Konfidenzstatus zu und formuliert die Begründung für ein Kompetenzniveau. Die Grenze zwischen beiden Ebenen ist entscheidend. Eine Beurteilung einer Person darf nur auf der Grundlage von Belegen erfolgen, die über viele Situationen hinweg gesammelt wurden, niemals anhand eines einzigen Gesprächs. Und dabei bleibt es auch: Die Architektur verbietet die Diagnose stabiler Persönlichkeitsmerkmale und untersagt statische Etikettierungen wie „Du bist eine einfühlsame Person“. Das Feedback beschreibt das Verhalten in einem Kontext, gibt den dahinterstehenden Konfidenzgrad an und nennt das nächste Szenario, das es wert ist, geübt zu werden.

Quelle

Metaskills

2026-08-24

Methodikhinweis, erstellt von Metaskills in Zusammenarbeit mit einem externen Team aus Spezialisten für Psychometrie und Führungskräftebeurteilung. Hierbei handelt es sich um einen internen Methodikhinweis und nicht um eine begutachtete Veröffentlichung.

Entsprechende Belege

Methodik

Validierungsmethodik

Wie wir KI-generierte Bewertungen im Vergleich zu unabhängigen menschlichen Bewertern testen und was bisher noch nicht geschehen ist.

Validierungsmethodik
Produkt

Digital Twin

Das Kompetenzprofil, das sich aus dieser Logik ergibt, und wie es für einen Lernenden und ein Team aussieht.

Digital Twin
Studie

Benutzerfreundlichkeit von avatarbasierten VR-Schulungen

47 Teilnehmer bewerteten die Schulungserfahrung. Erkenntnisse zur Benutzerfreundlichkeit, die eindeutig als solche gekennzeichnet sind.

Benutzerfreundlichkeit von avatarbasierten VR-Schulungen