Neocortex Logo

Meta Quest über Unity

KI-NPCs für Meta Quest

Spieler sprechen mit Charakteren, statt Dialogzeilen per Controller auszuwählen. Gestalte den Charakter im Browser und bring ihn mit dem Neocortex Unity SDK in dein Unity-XR-Projekt. Das Modell läuft auf den Servern von Neocortex, nicht auf dem Headset.

  • Kostenloser Plan
  • Keine Kreditkarte nötig
  • Unity, Unreal, Godot, Web SDK und Web API
Cora, der KI-Charakter von Neocortex, winkt zur Begrüßung
  • 5

    Wege zur Integration

    Unity, Unreal, Godot, Web SDK, Web API

  • 20+

    Sprachen

    pro Charakter einstellbar

  • 10 s

    zum Klonen einer Stimme

    oder per Text gestalten

  • 0 €

    zum Start

    kostenloser Plan und Tests im Editor

Unterstützt von Branchenführern

CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants
CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants

Loslegen

Von null zum sprechenden Charakter in Meta Quest

  1. 1

    Charakter gestalten

    Lege Persönlichkeit, Wissen, Stimme und Aktionen im visuellen Editor an und teste den Charakter im Browser.

  2. 2

    Unity SDK installieren

    Öffne in deinem XR-Projekt den Package Manager, wähle Add package from git URL und füge Folgendes ein:

    https://github.com/neocortex-link/neocortex-unity-sdk.git
  3. 3

    Ab ins Headset

    Füge deinen API-Schlüssel unter Tools > Neocortex > Settings ein, ergänze am Charakter einen Smart Agent, eine Audio Source und einen Audio Receiver, wähle ihn aus und builde für die Quest.

Voraussetzungen

  • Unity 6 (6000.0) oder neuer mit dem Build-Ziel Android
  • Ein XR-Setup wie das XR Interaction Toolkit
  • Ein kostenloses Neocortex-Konto und ein API-Schlüssel
Dokumentation für Meta Quest lesen

Was du bekommst

Gebaut für die Entwicklung mit Meta Quest

01

Freihändig sprechen

Standardmäßig Sprachaktivierung oder Push-to-Talk auf einer Controller-Taste, die Mikrofonberechtigung unter Android ist schon erledigt.

02

Leicht fürs Headset

Die Quest nimmt den Spieler auf und spielt die Antwort ab. Das Modell des Charakters läuft auf den Servern von Neocortex.

03

Open-Source-VR-Demo

Eine Szene auf GitHub, gebaut mit dem XR Interaction Toolkit, mit Sprachchat und einem verschiebbaren Chat-Panel.

04

Objekte zum Interagieren

Markiere Objekte als Interactable, dann kann der Charakter über sie sprechen und sie mit Aktionen ansteuern.

05

Lip Sync und Emotion

Der Face Animator bewegt den Mund, während der Charakter spricht, und jede Zeile trägt eine Emotion für die Mimik.

06

Überall derselbe Charakter

Der Charakter, den du baust, funktioniert auch in Unreal, Godot und im Web.

07

Stimme startet früher

Charaktere beginnen zu sprechen, sobald die Stimme eintrifft, statt auf den ganzen Clip zu warten.

08

Erinnert sich an den Spieler

Das SDK speichert eine Session pro Charakter, so macht der NPC beim nächsten Aufsetzen des Headsets im Gespräch weiter.

09

Mehrere NPCs gleichzeitig

NeocortexGroupDirector bringt mehrere Charaktere in ein Gespräch und entscheidet, wer antwortet, im Pro- oder Team-Plan.

So funktioniert's

Charaktere gestalten, statt Prompts zu babysitten

  • Persönlichkeit, Emotion, Wissen und Welt sind Nodes, die du verbindest, keine Prompts, die du ständig umschreibst.
  • Intents und Aktionen machen aus dem, was ein Spieler sagt, etwas, das dein Spiel tut.
  • Teste jeden Charakter kostenlos im Browser, bevor er in deiner Engine landet.
neocortex.link/dashboard/characters
Visueller Charakter-Editor von Neocortex: Nodes für Emotion, Persönlichkeit, Wissen, Sprache und Stimme, verbunden mit einem Agenten in einer Welt, dazu Intents, die auf Aktionen im Spiel abgebildet sind

Das sagen unsere Kunden

Erfahre, was Entwickler über ihre Arbeit mit Neocortex sagen.

Nachdem wir mehrere Anbieter für smarte NPCs ausprobiert hatten, stieß ich auf der Suche nach einer zustandsbehafteten Gesprächs-KI für unsere virtuelle Bildungsplattform auf Neocortex. Neocortex hat sich klar abgehoben und in allen unseren wichtigsten Kriterien überzeugt.

Vallikat Peethamber
Geschäftsführer

Neocortex hat uns skalierbare Lösungen für unsere VR-Plattform eröffnet und Szenarien ermöglicht, die Trainings deutlich immersiver machen. KI-Agenten in klaren Grenzen zu halten ist schwierig, doch Neocortex meistert das sehr gut und macht Anpassungen einfach.

Ottó Farkas
IT-Spezialist / Projektmanager

Im Unterricht bieten Neocortex und sein aktionsbasierter Mechanismus den Studierenden einen sofort nutzbaren Weg, Gesprächsagenten in software- und hardwarebasierte Interaktionsdesign-Workflows einzubinden.

Hongming Li
Dozent / Ausbilder

Ich bin während meiner Abschlussarbeit auf Neocortex gestoßen. Dank der einfachen Integration und Zugänglichkeit der Plattform konnte ich smarte NPCs problemlos in meine Anwendung einbauen. Absolute Empfehlung!

Angela Pellillo
Backend-Entwickler

Neocortex war der erste Schritt, um LLM-gestützte NPCs in einen echten Unity3D-Prototyp zu bringen. Es hat die Entwicklung enorm beschleunigt und meinen TikTok-Account innerhalb eines Monats von 0 auf 4000 Follower wachsen lassen!

Brandan Chen
Associate Game Producer

Nachdem wir mehrere Anbieter für smarte NPCs ausprobiert hatten, stieß ich auf der Suche nach einer zustandsbehafteten Gesprächs-KI für unsere virtuelle Bildungsplattform auf Neocortex. Neocortex hat sich klar abgehoben und in allen unseren wichtigsten Kriterien überzeugt.

Vallikat Peethamber
Geschäftsführer

Neocortex hat uns skalierbare Lösungen für unsere VR-Plattform eröffnet und Szenarien ermöglicht, die Trainings deutlich immersiver machen. KI-Agenten in klaren Grenzen zu halten ist schwierig, doch Neocortex meistert das sehr gut und macht Anpassungen einfach.

Ottó Farkas
IT-Spezialist / Projektmanager

Im Unterricht bieten Neocortex und sein aktionsbasierter Mechanismus den Studierenden einen sofort nutzbaren Weg, Gesprächsagenten in software- und hardwarebasierte Interaktionsdesign-Workflows einzubinden.

Hongming Li
Dozent / Ausbilder

Ich bin während meiner Abschlussarbeit auf Neocortex gestoßen. Dank der einfachen Integration und Zugänglichkeit der Plattform konnte ich smarte NPCs problemlos in meine Anwendung einbauen. Absolute Empfehlung!

Angela Pellillo
Backend-Entwickler

Neocortex war der erste Schritt, um LLM-gestützte NPCs in einen echten Unity3D-Prototyp zu bringen. Es hat die Entwicklung enorm beschleunigt und meinen TikTok-Account innerhalb eines Monats von 0 auf 4000 Follower wachsen lassen!

Brandan Chen
Associate Game Producer

Von der Idee zum spielbaren Charakter an einem Wochenende

Game-Jam-Teams bringen mit Neocortex innerhalb eines einzigen Wochenendes sprechende, handelnde KI-Charaktere in spielbare Games.

Zur Game-Jam-Story

FAQ

Neocortex für Meta Quest: häufige Fragen

Gibt es ein Neocortex-SDK für Meta Quest?

Kein separates. Apps für Meta Quest nutzen das Neocortex Unity SDK in einem Unity-XR-Projekt, zum Beispiel mit dem XR Interaction Toolkit.

Funktioniert es offline auf dem Headset?

Nein. Charaktere laufen auf den Servern von Neocortex, das Headset braucht also eine Internetverbindung. Studios können die Neocortex-Plattform auch auf eigener Infrastruktur betreiben.

Gibt es eine VR-Demo als Ausgangspunkt?

Ja. Unsere Open-Source-VR-Demo auf GitHub kombiniert das Neocortex Unity SDK mit dem XR Interaction Toolkit für Sprachchat mit einem NPC.

Können Spieler sprechen, ohne eine Taste zu drücken?

Ja. Der Audio Receiver hört standardmäßig per Sprachaktivierung zu. Wechsle zu Push-to-Talk, wenn Spieler lieber einen Trigger gedrückt halten.

Kann ich eine Quizshow in VR machen?

Ja. NeocortexQuizAgent aus dem Unity SDK läuft auf Meta Quest wie der Rest des SDK, also kann ein Charakter im Headset ein gesprochenes Quiz moderieren, mit einem Fragenset, das du im Dashboard schreibst. Quizze brauchen einen Team-Plan.

Kann ich begrenzen, wie viel jeder Spieler nutzt?

Ja. Das Unity SDK sendet die ID jedes Geräts als Spieler-ID, Credit-Limits pro Spieler aus dem Dashboard gelten also pro Headset. NeocortexUsageGate prüft sie, bevor eine Nachricht gesendet wird.

Kann der Charakter mit einer eigenen Stimme sprechen?

Ja. Ein Charakter kann mit einer Basis-, geklonten oder gestalteten Stimme sprechen, die du im Editor festlegst und die im Headset genauso funktioniert. Geklonte Stimmen erfordern einen Pro- oder Team-Plan.

Du vergleichst Tools?

So schneidet Neocortex für Teams mit Meta Quest ab

Sprich in VR mit deinem NPC

Kostenloser Plan, keine Kreditkarte. Bau einen Charakter im Browser und sprich nach wenigen Minuten mit ihm.