Metaskills
BADANIA · DIGITAL TWIN

Jak naprawdę działa system Digital Twin

Seria artykułów poświęcona metodologii pomiaru umiejętności ludzkich na podstawie rozmowy: model kompetencji leżący u jej podstaw, co uznaje się za dowody behawioralne, w jaki sposób weryfikujemy ocenę w porównaniu z ocenami przeprowadzanymi przez ludzi, decyzje dotyczące prywatności i nadzoru wbudowane w projekt oraz sposób, w jaki całość integruje się z rzeczywistym systemem.

Seria

01 · Metodologia

Model kompetencji

18 kompetencji w czterech obszarach oraz 108 scenariuszy behawioralnych. Dlaczego wybrano taksonomię funkcjonalną zamiast modelu osobowości, co zawiera opis kompetencji oraz dlaczego konieczne było rozdzielenie kompetencji „Empatia” i „Aktywne słuchanie”.

Przeczytaj

02 · Metodologia

W jaki sposób zachowanie staje się dowodem

Co algorytm uznaje za dowód kompetencji, a czego nie uznaje. Jakość dowodów, zachowania decydujące o wyniku, dlaczego poziom pewności jest podawany wprost i dlaczego nigdy nie obliczamy średniej.

Przeczytaj

03 · Trwa weryfikacja

Porównanie z ocenami ekspertów

Projekt badania, opublikowany przed ogłoszeniem wyników: ten sam scenariusz z udziałem awatara opartego na sztucznej inteligencji oraz z udziałem prawdziwego aktora, oceniany przez niezależnych recenzentów. To, co zamierzamy przetestować, a co jeszcze nie miało miejsca.

Przeczytaj

04 · Ramy projektowe

Prywatność, stronniczość i błędy ludzkie

To, co ocena może uwzględniać, cztery wektory stronniczości, na które kierujemy nasze działania, wymóg, by każda ocena zawierała cytat z transkrypcji, oraz etapy, w których w procesie uczestniczy człowiek.

Przeczytaj

05 · Uwaga techniczna

Architektura techniczna i integracja

Dla osób, które muszą to zatwierdzić: silnik oddzielony od interfejsu i pamięci masowej, co przekracza granicę między nimi, niezmienne wersjonowanie profili oraz to, czego system celowo nigdy nie rejestruje.

Przeczytaj

Model w liczbach

18
Kompetencje

Podzielone na cztery obszary behawioralne, z których każdy ma własną definicję i granice.

Metaskills model kompetencji, 2026 r. (wewnętrzna nota metodologiczna).

108
Scenariusze zachowań

Każdy z nich został opisany w kontekście czterech poziomów opanowania.

Metaskills model kompetencji, 2026 r. (wewnętrzna nota metodologiczna).

6
Funkcje rozmowy

Każdy scenariusz jest oznaczony celem rozmowy, a nie tylko jej tematem.

Metaskills model kompetencji, 2026 r. (wewnętrzna nota metodologiczna).

4
Poziomy ufności

W profilu podano, na jakiej ilości dowodów opiera się każda kompetencja, w tym również w przypadkach, gdy dowodów jest za mało.

Metaskills metodologia oceny, 2026 r. (wewnętrzna nota metodologiczna).

Co publikujemy, a co pozostaje wyłącznie do użytku wewnętrznego

Publikujemy metodę oraz dane, które ją opisują: jak zorganizowane są kompetencje, co uznaje się za dowód, w jaki sposób ustalany jest poziom pewności oraz jak zaprojektowano proces walidacji. Każdy, kto ocenia ten produkt, powinien mieć możliwość zweryfikowania naszego rozumowania, zamiast polegać wyłącznie na naszych słowach. To, co pozostaje w sferze wewnętrznej, to materiały, które przestają być przydatne w momencie ich upublicznienia: pełna matryca zawierająca opisy 18 kompetencji, 108 scenariuszy behawioralnych, struktury poleceń oraz progi określające poziomy pewności. Kandydat, który zapoznał się ze scenariuszem i schematem oceniania, nie jest już oceniany pod kątem zachowania - jest oceniany pod kątem przygotowania, a jest to właśnie ten rodzaj niepowodzenia, którego ten model miał na celu uniknąć. Wolimy głośno wyznaczyć tę granicę, niż pozostawić lukę, którą sami moglibyście dostrzec.

Na jakim etapie jesteśmy

Model kompetencji został opracowany, a logika oceny działa: 18 kompetencji, 108 scenariuszy, ocena oparta na dowodach z podaniem poziomu ufności dla każdej kompetencji. Trwa proces walidacji z udziałem niezależnych oceniających. Projekt został opracowany, zrekrutowano grupę uczestników, a narzędzia oceny są gotowe; przed nami same testy. Do czasu opublikowania wyników testów uczciwy opis programu Digital Twin to dobrze uzasadniony projekt z widocznymi poziomami pewności - a nie zatwierdzone narzędzie pomiarowe i nie będziemy go tak określać, dopóki nie pojawią się na to dowody.

Powiązane dowody

Badanie

Użyteczność szkoleń VR opartych na awatarach

Czterdziestu siedmiu uczestników oceniło przebieg szkolenia pod kątem: łatwości użytkowania, przejrzystości instrukcji, jakości awatarów oraz nakładu pracy.

Użyteczność szkoleń VR opartych na awatarach
Pilot

Programy pilotażowe w zakresie ochrony zdrowia w Hiszpanii

Co jest potrzebne do wdrożenia symulacji komunikacyjnych w rzeczywistej ochronie zdrowia - przeglądarka kontra VR, realizm kliniczny, lokalizacja.

Programy pilotażowe w zakresie ochrony zdrowia w Hiszpanii
Badania

Badania i dane naukowe

Wszystko, co opublikowaliśmy, wraz z podanymi źródłami i ograniczeniami.

Badania i dane naukowe

Chcesz zobaczyć, jak ten profil wygląda w praktyce?

Na stronie produktu pokazano, jakie korzyści faktycznie czerpią z tego rozwiązania zarówno osoba ucząca się, jak i kierownik zespołu - raporty, plany rozwoju oraz rozmowy, które za nimi stoją.