Neocortex Logo

Szkolenie miękkich umiejętności w VR z AI: odgrywanie ról

Zbuduj szkolenie miękkich umiejętności w VR z Neocortex: postacie AI do odgrywania ról na Meta Quest, które reagują na słowa stażystów, przechodzą przez punkty kontrolne i zasilają podsumowanie.

Neocortex TeamThe team behind Neocortex

· 6 min czytania

Zbuduj szkolenie miękkich umiejętności w VR z Neocortex: postacie AI do odgrywania ról na Meta Quest, które reagują na słowa stażystów, przechodzą przez punkty kontrolne i zasilają podsumowanie.

Większość szkoleń miękkich umiejętności nadal oznacza film, test wielokrotnego wyboru i może jedno niezręczne odgrywanie ról z kolegą, który jest dla ciebie zbyt łagodny. Neocortex pozwala scenariuszowi VR postawić stażystę przed postacią, która taka nie jest: zdenerwowanym gościem, niespokojnym pacjentem albo twardym klientem, który reaguje na każde wypowiedziane słowo i uspokaja się albo złości, tak jak prawdziwy człowiek.

Jak to wygląda

The Albury to wymyślony hotel miejski, odtworzony w VR na potrzeby programu szkoleniowego dla branży hotelowej. Nowa stażystka na recepcji zakłada gogle Meta Quest i stwierdza, że stoi za ladą recepcji o jedenastej w nocy. Przez obrotowe drzwi wchodzi Harriet Lowe, ciągnąc walizkę i już zirytowana. Jej pokój oddano godzinę temu.

Harriet: Zarezerwowałam ten pokój cztery miesiące temu. Cztery. A ty mówisz, że go nie ma? Stażystka: To nie jest w porządku i bardzo przepraszam. Zobaczę, co mogę dla pani zrobić od razu. Harriet: Dobrze. Ale nie będę spać w schowku na miotły.

Stażystka sprawdza na wirtualnym ekranie rezerwacji, a aplikacja wysyła zdarzenie: jeden apartament na najwyższym piętrze jest wolny. Oferuje go po pierwotnej stawce, ze śniadaniem. Kolejna kwestia Harriet wraca oznaczona jako ulga, opuszcza założone ręce, a odpowiedź niesie działanie TAKE_KEYCARD, które aplikacja odtwarza jako sięgnięcie po kartę.

Inna stażystka prowadzi ten sam scenariusz i zaczyna od słów „Cóż, to polityka hotelu”. Emocja Harriet zmienia się na złość, odpowiedź niesie ASK_FOR_MANAGER i scena robi się trudniejsza. Żadna z tych ścieżek nie była zaskryptowana. Trener określił, kim jest Harriet, czego chce i przez jakie punkty kontrolne przechodzi dobra odpowiedź.

Gdy scena się kończy, gogle pokazują podsumowanie: punkty kontrolne, które stażystka osiągnęła, i cztery krótkie pytania o to, co wytyczne hotelu dotyczące reklamacji każą zaproponować.

Jak Neocortex to umożliwia

  • Postacie AI. Harriet projektuje się w wizualnym edytorze węzłów Neocortex: osobowość, historię, czego oczekuje, co ją uspokoi, a co pogorszy sprawę. Trenerzy mogą ćwiczyć z nią w panelu w przeglądarce, zanim ktokolwiek zbuduje lobby.
  • Emocje. Każda linia niesie znacznik emocji. Twój system animacji zamienia je w postawę i mimikę, więc stażystka czyta gościa tak, jak zrobiłaby to przy prawdziwym biurku.
  • Conversation Flows. Węzły Start, Checkpoint i End definiują scenariusz: przyznać rację, przeprosić, zaproponować rozwiązanie, potwierdzić kolejny krok. Każda odpowiedź zwraca słowo kluczowe flowState, które aplikacja zapisuje do oceny. Flows są dostępne w każdym planie.
  • Zdarzenia. Liczy się też to, co stażysta robi rękami. Sprawdzenie ekranu rezerwacji, wezwanie obsługi pięter czy przekazanie vouchera trafia do systemu jako zdarzenie, a Harriet na nie reaguje.
  • Działania. TAKE_KEYCARD, ASK_FOR_MANAGER czy WALK_AWAY wracają z odpowiedziami, a scena je odtwarza.
  • Głosy, zamiana mowy na tekst i synchronizacja ust. Stażyści mówią naturalnie do gogli, postać odpowiada strumieniowanym głosem, a zestaw SDK Unity steruje jej blend shape'ami twarzy, tak że usta poruszają się zgodnie ze słowami.
  • Silnik quizów. Zestawy pytań i punktacja przez API tworzą podsumowanie (plan Team).
  • Kontrola użycia. Wysyłaj playerId dla każdego stażysty i śledź użycie na gracza i na postać, z analityką w panelu, tak by kierownik programu widział, kto ćwiczył i jak często.
  • Baza wiedzy. Wgraj wytyczne obsługi firmy, by postać trenera w podsumowaniu wyjaśniła, na co polityka faktycznie pozwala.

Pomysły na scenariusze

Przyjęcie pacjenta. Zdenerwowany pacjent, Tomasz, przychodzi na zabieg, którego się obawiał, i udziela krótkich, wymijających odpowiedzi. Pielęgniarka w trakcie szkolenia musi go uspokoić i mimo to zebrać wywiad. Punkty kontrolne śledzą, czy omówiono alergie, leki i zgodę, a jego znaczniki emocji pokazują, czy się rozluźnia, czy zamyka.

Ćwiczenie obiekcji sprzedażowych. Osoba z działu zakupów, Ruth Ambler, lubi produkt, nie znosi ceny i ma na biurku tańszą ofertę od innego dostawcy. Stażyści sprzedaży ćwiczą odpowiadanie na każdą obiekcję po kolei. Flow zapisuje, czy zapytali o jej prawdziwe ograniczenie, zanim zaoferowali rabat, a quiz po scenie sprawdza, czy znają zasady cenowe.

Trening deeskalacji. Klient w zatłoczonym sklepie krzyczy o zwrot, a stażysta to ochroniarz lub kierownik sklepu. Zdarzenia ze sceny, na przykład tłum, który się zbiera, albo nadchodzący kolega, podnoszą lub obniżają napięcie. Działanie CALM_DOWN albo STORM_OUT mówi aplikacji, jak scena się skończyła.

Drugi głos. Przy scenach z dwiema osobami, na przykład parą, która się kłóci przy recepcji hotelu, czat grupowy umieszcza obie postacie w jednej rozmowie (plany Pro i Team). Conversation Flows nie działają w czacie grupowym, więc takie sceny oceniaj na podstawie zdarzeń i własnej punktacji.

Budowanie

Szkolenie VR działa na Meta Quest w Unity z XR Interaction Toolkit i zestawem SDK Unity. Nasze otwarte demo VR to dobry punkt startowy po stronie zestawu.

  1. Napisz scenariusz tak, jak napisałby go trener. Kim jest postać, co poszło nie tak, jak wygląda dobry wynik i jakie błędy chcesz, by stażyści przeżyli.
  2. Stwórz postać w wizualnym edytorze z osobowością, głosem, emocjami i kilkoma działaniami języka ciała.
  3. Zamień kryteria oceny w Conversation Flow, z jednym punktem kontrolnym na każde zachowanie, które chcesz zobaczyć.
  4. Ćwicz w panelu z dobrymi, przeciętnymi i złymi odpowiedziami, aż postać zareaguje tak, jak oczekuje doświadczony trener.
  5. Zbuduj scenę na podstawie dema VR: mikrofon na wejściu, głos i synchronizacja ust na wyjściu, działania zmapowane na animacje, zdarzenia dla tego, co robi stażysta.
  6. Zapisuj stany flow dla każdego stażysty, dodaj quiz podsumowujący w planie Team i przeglądaj użycie w panelu.

Pierwszą wersję każdej postaci uczyń trochę łatwiejszą niż prawdziwe życie. Stażyści, którzy raz odnieśli sukces, chętniej powtórzą trudniejszą wersję, w której gość nie uspokaja się tak szybko.

Szkolenie miękkich umiejętności to jeden z wpisów w naszym zestawieniu przypadków użycia AI NPC, ambient AI i komend głosowych. Inne pomysły na VR znajdziesz w postaciach AI dla escape roomów VR, a do odgrywania ról w klasie zobacz partnerów do rozmów AI do nauki języków. Pozostałe zagadnienia opisują strony edukacja i szkolenia oraz doświadczenia VR. Zacznij od jednego trudnego gościa i czterech punktów kontrolnych.

Sprawdzone w październiku 2026.

Najczęściej zadawane pytania

Czy postacie AI mogą służyć do szkoleń miękkich umiejętności w VR?

Tak. Postacie Neocortex działają w aplikacjach Meta Quest zbudowanych w Unity z XR Interaction Toolkit. Stażyści mówią do nich, a postacie odpowiadają własnym głosem z emocją odzwierciedlającą przebieg rozmowy.

Jak ocenia się stażystę w rozmowie z AI?

Zaprojektuj scenariusz jako Conversation Flow w Neocortex z punktami kontrolnymi, takimi jak przyznanie racji wobec problemu czy zaproponowanie rozwiązania. Każda odpowiedź zwraca słowo kluczowe flowState, więc aplikacja może zapisać, które punkty kontrolne stażysta osiągnął.

Czy scenariusz szkolenia w VR może zakończyć się quizem?

Tak. Silnik quizów Neocortex prowadzi zestawy pytań i punktację przez API w planie Team, co dobrze pasuje do krótkiego podsumowania po każdym odgrywaniu roli.

Czy użycie szkolenia AI można śledzić dla każdego stażysty?

Tak. Wysyłaj identyfikator gracza przy każdym żądaniu, a Neocortex śledzi użycie i limity na gracza i na postać, z analityką w panelu.

Podobne artykuły

Czytaj dalej