Neocortex Logo

Meta Quest przez Unity

NPC z AI dla Meta Quest

Gracze rozmawiają z postaciami, zamiast wybierać kwestie kontrolerem. Zaprojektuj postać w przeglądarce i wprowadź ją do swojego projektu Unity XR z Neocortex Unity SDK. Model działa na serwerach Neocortex, a nie na goglach.

  • Darmowy plan
  • Bez karty kredytowej
  • Unity, Unreal, Godot, Web SDK i Web API
Cora, postać AI Neocortex, macha na powitanie
  • 5

    sposobów integracji

    Unity, Unreal, Godot, Web SDK, Web API

  • 20+

    języków

    ustawianych osobno dla każdej postaci

  • 10 s

    na sklonowanie głosu

    albo zaprojektuj nowy z opisu tekstowego

  • 0 €

    na start

    darmowy plan i testy w edytorze

Wspierają nas liderzy branży

CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants
CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants

Pierwsze kroki

Meta Quest: od zera do mówiącej postaci

  1. 1

    Zaprojektuj postać

    Zbuduj osobowość, wiedzę, głos i akcje w wizualnym edytorze i przetestuj postać w przeglądarce.

  2. 2

    Zainstaluj Unity SDK

    W projekcie XR otwórz Package Manager, wybierz Add package from git URL i wklej:

    https://github.com/neocortex-link/neocortex-unity-sdk.git
  3. 3

    Przenieś ją do gogli

    Wklej klucz API w Tools > Neocortex > Settings, dodaj do postaci Smart Agent, Audio Source i Audio Receiver, wybierz ją i zbuduj projekt na Questa.

Wymagania

  • Unity 6 (6000.0) lub nowsze z platformą docelową Android
  • Konfiguracja XR, np. XR Interaction Toolkit
  • Darmowe konto Neocortex i klucz API
Zobacz dokumentację: Meta Quest

Co dostajesz

Meta Quest: stworzone dla deweloperów

01

Głos bez użycia rąk

Domyślnie wykrywanie mowy albo push-to-talk pod przyciskiem kontrolera, z obsługą uprawnień do mikrofonu na Androidzie.

02

Lekko dla gogli

Quest nagrywa gracza i odtwarza odpowiedź. Model postaci działa na serwerach Neocortex.

03

Demo VR open source

Scena na GitHubie zbudowana z XR Interaction Toolkit, z czatem głosowym i panelem czatu, który możesz przesuwać.

04

Obiekty, na których może działać

Oznacz obiekty jako Interactable, a postać może o nich mówić i kierować na nie akcje.

05

Lip sync i emocje

Face Animator porusza ustami, gdy postać mówi, a każda kwestia niesie emocję, którą przełożysz na mimikę.

06

Ta sama postać wszędzie

Postać, którą zbudujesz, działa też w Unreal, Godot i w przeglądarce.

07

Głos startuje szybciej

Postacie zaczynają mówić, gdy tylko dociera głos, zamiast czekać na cały klip.

08

Pamięta gracza

SDK zapisuje sesję dla każdej postaci, więc NPC wraca do rozmowy, gdy gracz następnym razem założy gogle.

09

Kilku NPC naraz

NeocortexGroupDirector umieszcza kilka postaci w jednej rozmowie i decyduje, kto odpowiada, w planie Pro lub Team.

Jak to działa

Postacie, które projektujesz, a nie prompty, których musisz pilnować

  • Osobowość, emocje, wiedza i świat to węzły, które łączysz, a nie prompty, które ciągle przepisujesz.
  • Intencje i akcje zamieniają słowa gracza w to, co robi Twoja gra.
  • Każdą postać za darmo przetestujesz w przeglądarce, zanim trafi do Twojego silnika.
neocortex.link/dashboard/characters
Wizualny edytor postaci Neocortex: węzły emocji, osobowości, wiedzy, języka i głosu połączone z agentem w świecie, a intencje przypisane do akcji w grze

Co mówią nasi klienci

Zobacz, co twórcy mówią o pracy z Neocortex.

Po przetestowaniu kilku dostawców inteligentnych NPC trafiłem na Neocortex, szukając konwersacyjnej AI, która zapamiętuje stan rozmowy, dla naszej platformy edukacji wirtualnej. Neocortex wyróżnił się na tle konkurencji i spełnił wszystkie nasze kluczowe kryteria.

Vallikat Peethamber
Dyrektor zarządzający

Neocortex otworzył przed naszą platformą VR skalowalne rozwiązania i pozwolił tworzyć scenariusze, dzięki którym szkolenia są znacznie bardziej immersyjne. Utrzymanie agentów AI w jasno określonych granicach jest trudne, ale Neocortex radzi sobie z tym bardzo dobrze i ułatwia personalizację.

Ottó Farkas
Specjalista IT / Kierownik projektu

Na zajęciach Neocortex i jego mechanizm oparty na akcjach dają studentom gotowy sposób na łączenie agentów konwersacyjnych z procesami projektowania interakcji opartymi na oprogramowaniu i sprzęcie.

Hongming Li
Wykładowca / Instruktor

Trafiłem na Neocortex podczas pracy nad projektem dyplomowym, a łatwa integracja i przystępność platformy pozwoliły mi bez problemu dodać inteligentne NPC do mojej aplikacji. Gorąco polecam!

Angela Pellillo
Backend developer

Neocortex był pierwszym krokiem do wprowadzenia NPC opartych na LLM do prawdziwego prototypu w Unity3D: przyspieszył prace i pomógł mi w miesiąc zwiększyć liczbę obserwujących na TikToku z 0 do 4000!

Brandan Chen
Associate Game Producer

Po przetestowaniu kilku dostawców inteligentnych NPC trafiłem na Neocortex, szukając konwersacyjnej AI, która zapamiętuje stan rozmowy, dla naszej platformy edukacji wirtualnej. Neocortex wyróżnił się na tle konkurencji i spełnił wszystkie nasze kluczowe kryteria.

Vallikat Peethamber
Dyrektor zarządzający

Neocortex otworzył przed naszą platformą VR skalowalne rozwiązania i pozwolił tworzyć scenariusze, dzięki którym szkolenia są znacznie bardziej immersyjne. Utrzymanie agentów AI w jasno określonych granicach jest trudne, ale Neocortex radzi sobie z tym bardzo dobrze i ułatwia personalizację.

Ottó Farkas
Specjalista IT / Kierownik projektu

Na zajęciach Neocortex i jego mechanizm oparty na akcjach dają studentom gotowy sposób na łączenie agentów konwersacyjnych z procesami projektowania interakcji opartymi na oprogramowaniu i sprzęcie.

Hongming Li
Wykładowca / Instruktor

Trafiłem na Neocortex podczas pracy nad projektem dyplomowym, a łatwa integracja i przystępność platformy pozwoliły mi bez problemu dodać inteligentne NPC do mojej aplikacji. Gorąco polecam!

Angela Pellillo
Backend developer

Neocortex był pierwszym krokiem do wprowadzenia NPC opartych na LLM do prawdziwego prototypu w Unity3D: przyspieszył prace i pomógł mi w miesiąc zwiększyć liczbę obserwujących na TikToku z 0 do 4000!

Brandan Chen
Associate Game Producer

Od pomysłu do grywalnej postaci w jeden weekend

Zespoły na game jamach dzięki Neocortex wstawiają do grywalnych gier postacie AI, które mówią i działają, i to w ciągu jednego weekendu.

Przeczytaj historię z game jamu

FAQ

Neocortex dla Meta Quest: najczęstsze pytania

Czy jest SDK Neocortex dla Meta Quest?

Nie osobne. Aplikacje na Meta Quest korzystają z Neocortex Unity SDK w projekcie Unity XR, np. z XR Interaction Toolkit.

Czy działa offline na goglach?

Nie. Postacie działają na serwerach Neocortex, więc gogle potrzebują połączenia z internetem. Studia mogą też uruchomić platformę Neocortex na własnej infrastrukturze.

Czy jest demo VR, od którego mogę zacząć?

Tak. Nasze demo VR open source na GitHubie łączy Neocortex Unity SDK z XR Interaction Toolkit, by umożliwić czat głosowy z NPC.

Czy gracze mogą mówić bez naciskania przycisku?

Tak. Audio Receiver domyślnie nasłuchuje z wykrywaniem mowy. Przełącz na push-to-talk, jeśli gracze wolą przytrzymać spust.

Czy mogę poprowadzić teleturniej w VR?

Tak. NeocortexQuizAgent z Unity SDK działa na Meta Quest tak jak reszta SDK, więc postać może poprowadzić w goglach quiz na głos na podstawie zestawu pytań, który piszesz w panelu. Quizy wymagają planu Team.

Czy mogę ograniczyć, ile zużywa każdy gracz?

Tak. Unity SDK wysyła id każdego urządzenia jako id gracza, więc limity kredytów na gracza ustawione w panelu działają osobno dla każdych gogli. NeocortexUsageGate sprawdza je przed wysłaniem wiadomości.

Czy postać może mówić własnym głosem?

Tak. Postać może mówić głosem podstawowym, sklonowanym lub zaprojektowanym, ustawionym w edytorze i używanym tak samo w goglach. Sklonowane głosy wymagają planu Pro lub Team.

Porównujesz narzędzia?

Meta Quest: jak Neocortex wypada na tle innych narzędzi

Porozmawiaj ze swoim NPC w VR

Darmowy plan, bez karty kredytowej. Zbuduj postać w przeglądarce i porozmawiaj z nią w kilka minut.