Metaskills
BADANIA · DIGITAL TWIN · METODYKA

Od rozmowy do profilu: fakty, a nie wrażenia

Profil kompetencji ma wartość tylko wtedy, gdy można określić, z jakich elementów się składa. Na tej stronie opisano, co moduł oceny uznaje za dowód posiadania danej kompetencji, czego nie uznaje za dowód oraz dlaczego pojedyncza udana rozmowa nie wystarczy, by wpłynąć na profil.

Metaskills metodologia oceny, 2026 r.

MetodykaMetaskillsOpis metodykiUwaga metodologiczna - część serii Digital Twin

Co uznaje się za zdarzenie dowodowe

Jednostką, na której opiera się ten mechanizm, nie jest ogólne wrażenie z rozmowy. Jest to zdarzenie dowodowe: konkretny moment w transkrypcji, w którym dane zachowanie osoby świadczy o jej kompetencji w działaniu - można je zacytować i zlokalizować. Pod wszystkimi innymi zasadami na tej stronie kryje się jedna podstawowa zasada: samo wystąpienie danego zachowania nie wystarczy. Ktoś może wypowiedzieć słowa przeprosin, zadać pytanie weryfikujące lub nazwać emocję, ale nic z tego nie ma znaczenia, jeśli nastąpiło to w niewłaściwym momencie, nie dotarło do osoby stojącej przed nim lub nastąpiło dopiero po tym, jak został do tego zmuszony. Dlatego każde zdarzenie dowodowe podlega ocenie jakościowej, a nie jest po prostu zaznaczane w rubryce.

Cztery pytania, które zadajemy w odniesieniu do każdego dowodu

Spontaniczność

Czy zachowanie to pojawiło się z własnej inicjatywy, czy dopiero po wywarciu wyraźnej presji przez awatara? Oba przypadki są rejestrowane. Nie oznaczają one tego samego.

Czas

Czy rozmowa dotarła do etapu, na którym mogło to jeszcze wpłynąć na jej wynik? Odpowiednie zdanie wypowiedziane trzy minuty za późno daje inny rezultat niż to samo zdanie wypowiedziane w odpowiednim momencie.

Dopasować się do drugiej osoby

Czy styl wypowiedzi został dostosowany do osób, które faktycznie tam były - do ich potrzeb emocjonalnych i tego, na ile szczegółowych informacji były w stanie przyjąć? Dobrze sformułowane wyjaśnienie skierowane do niewłaściwej osoby nie stanowi dobrej komunikacji.

Proporcjonalność

Czy było tego za dużo? Nadmierna empatia osłabia jasność myślenia równie niezawodnie, jak nadmierna asertywność nasila napięcie. Więcej czegoś dobrego niekoniecznie oznacza lepszy wynik.

Niektóre zachowania ograniczają wynik

Nie wszystko w rozmowie ma znaczenie. Określony zestaw destrukcyjnych zachowań pełni rolę ogranicznika, a nie elementu, od którego można odejmować punkty - są to zachowania, które szkodzą drugiej osobie lub relacji zawodowej, a nie tylko nie pomagają. To, które zachowania należą do tego zestawu, stanowi część modelu i pozostaje w jego obrębie; warto opublikować samą zasadę. Jeśli jedno z nich pojawi się w decydującym momencie scenariusza, ogranicza ono maksymalną liczbę punktów, jaką można uzyskać za daną kompetencję, a pozytywne zachowania w innych momentach tej samej rozmowy nie pozwalają na odzyskanie utraconych punktów. Jest to zamierzone. W prawdziwej rozmowie klinicznej lub menedżerskiej jednego szkodliwego posunięcia nie da się zniwelować średnią z pięciu dobrych, a ocena, która udawałaby, że jest inaczej, przekazywałaby niewłaściwą lekcję.

Jak wysoki jest poziom pewności co do profilu, wyrażony na głos

1

Niewystarczające dane

Zbyt mała liczba przykładów lub wszystkie pochodzą z jednej i tej samej sytuacji. Kompetencja została oznaczona jako „jeszcze niepodlegająca ocenie”. Wolimy wskazać lukę niż podawać liczbę, na której nikt nie powinien się opierać.

2

Wyłaniający się wzór

Zjawisko to zaobserwowano w więcej niż jednym rodzaju kontekstu. To wystarczy do sformułowania wstępnej opinii, określonej właśnie jako wstępna - z zaznaczeniem ograniczonego stopnia pewności w treści raportu, a nie ukrytej w przypisie.

3

Zweryfikowany wzór

Powtarzane w kilku wyraźnie różniących się kontekstach, w tym w trudnych sytuacjach, a nie tylko w tych komfortowych. To właśnie w tym momencie profil zaczyna stanowić podstawę do planowania rozwoju.

4

Odporny na presję

Zachowanie to utrzymuje się nawet podczas bardzo napiętych rozmów oraz w obliczu aktywnego oporu ze strony awatara, bez utraty jakości. Jest to najwyższy status przyznawany przez model i jednocześnie najrzadszy.

Dlaczego nie obliczamy średniej

Silnikowi wyraźnie zabrania się obliczania prostej średniej arytmetycznej wyników sesji. Średnia z dobrego wyniku w łatwej rozmowie i słabego wyniku pod presją daje wynik średni, który nie odzwierciedla żadnego z nich i ukrywa jedyną rzecz, o której warto wiedzieć: z jakimi sytuacjami dana osoba sobie radzi, a z jakimi nie. Zamiast tego agregacja bierze pod uwagę wzorzec - ile jest dowodów, jak zróżnicowane są konteksty, jak trudne były scenariusze oraz czy jakość pozostaje na tym samym poziomie, gdy rozmowa staje się trudna. Różnorodność kontekstów jest wymogiem, a nie dodatkiem: zachowanie potwierdzone tylko w jednym typie relacji i w kontaktach z jednym rodzajem rozmówcy nie staje się potwierdzonym wzorcem, niezależnie od tego, jak często się tam powtarza. Przed tym wszystkim stosowany jest jeszcze jeden filtr. Ćwiczenia z przewodnikiem, podczas których uczący się otrzymuje podpowiedzi w trakcie rozmowy, są wykluczane z danych oceny. Ćwiczenia służą nauce; uwzględnienie ich w ocenie zafałszowałoby profil.

Dwie warstwy i twarda granica

Ocena przebiega na dwóch odrębnych poziomach. Pierwszy z nich analizuje jedną zakończoną rozmowę i nie wykonuje żadnych innych czynności: porównuje transkrypcję ze scenariuszem oraz profilem awatara, a następnie zwraca ustrukturyzowane zdarzenia dowodowe. Nie wolno mu wyciągać wniosków dotyczących danej osoby. Druga warstwa obejmuje wiele rozmów. Poszukuje ona wzorców, w tym interakcji między kompetencjami - na przykład sytuacji, w której silne aktywne słuchanie dyskretnie maskuje rzeczywisty brak asertywności lub zdolności do podejmowania decyzji - i to właśnie ta warstwa przypisuje poziom pewności oraz formułuje uzasadnienie dla poziomu kompetencji. Istotna jest właśnie granica między nimi. Ocenę danej osoby można wydać wyłącznie na podstawie dowodów zebranych w wielu sytuacjach, nigdy na podstawie jednej rozmowy. I na tym się kończy: architektura systemu uniemożliwia diagnozowanie stałych cech osobowości i zabrania stosowania statycznych etykiet, takich jak „jesteś osobą empatyczną”. Informacja zwrotna opisuje zachowanie w kontekście, określa poziom pewności z nim związany oraz wskazuje kolejny scenariusz, który warto przećwiczyć.

Źródło

Metaskills

2026-08-24

Notatka metodologiczna przygotowana przez firmę Metaskills we współpracy z zewnętrznym zespołem specjalistów ds. psychometrii i oceny przywództwa. Jest to notatka metodologiczna o charakterze wewnętrznym, a nie publikacja poddana recenzji naukowej.

Powiązane dowody

Metodologia

Metodologia walidacji

W jaki sposób porównujemy oceny generowane przez sztuczną inteligencję z ocenami niezależnych ekspertów oraz czego jeszcze nie udało się osiągnąć.

Metodologia walidacji
Produkt

Digital Twin

Profil kompetencji wynikający z tej logiki oraz to, jak wygląda on z perspektywy uczącego się i zespołu.

Digital Twin
Badanie

Użyteczność szkoleń VR opartych na awatarach

Czterdziestu siedmiu uczestników oceniło swoje wrażenia z szkolenia. Dane dotyczące użyteczności, wyraźnie oznaczone jako takie.

Użyteczność szkoleń VR opartych na awatarach