Unity Sentis vs. Neocortex für KI-NPCs
Unity Sentis führt neuronale Netze auf dem Gerät aus, ist aber kein System für KI-Figuren. Was NPCs mit Sentis an Aufwand brauchen und wann Neocortex schneller ist.
Neocortex TeamThe team behind Neocortex
· Aktualisiert 20. Okt. 2026 · 5 Min. Lesezeit

Kurze Antwort: Unity Sentis führt neuronale Netze in Ihrem Spiel aus. Es ist ein Baustein für KI-NPCs, kein System für Figuren. Wenn Sie diese Woche einen sprechenden NPC wollen, gibt Ihnen Neocortex die Figur, die Stimme und das Unity-SDK. Brauchen Sie eigene Modelle auf dem Gerät, ist Sentis das richtige Werkzeug, und beide arbeiten zusammen.
Wer nach „KI in Unity“ sucht, stößt schnell auf Sentis, deshalb liegt die Frage nahe, ob es alles ist, was man für KI-NPCs braucht. Hier steht, was Sentis macht, was eine Figur damit kostet und wo Neocortex passt.
Unity Sentis kurz erklärt
Sentis ist Unitys Bibliothek, um trainierte Modelle auf dem Gerät des Spielers auszuführen, auf der CPU oder GPU, auf allen Laufzeitplattformen von Unity.
- Importiert ONNX-Modelle, LiteRT-Modelle (früher TensorFlow Lite) und exportierte PyTorch-Programme.
- Tokenisiert Text für Sprachmodelle, mit einem Tokenizer, der die
tokenizer.json-Dateien liest, die in den meisten Hugging-Face-Modellrepositorys liegen. - Hatte zwei Namen. Eine Zeit lang wurde das Paket als Inference Engine angezeigt. Ab Version 2.4 heißt der Anzeigename wieder Sentis, die Paket-ID bleibt
com.unity.ai.inference.
Sentis ist für eigene Modelle auf dem Gerät gedacht: Bilderkennung, Posenerkennung, Klassifikatoren und kleine generative Modelle. Unity hat darauf kein Gesprächsfeature für Figuren aufgebaut. Unity AI, der Nachfolger von Muse, ist ein Assistent im Editor, der beim Bau Ihres Spiels hilft, kein System für Figuren zur Laufzeit.
Was eine sprechende NPC auf Sentis braucht
Hier ist die Arbeit, der Reihe nach, für einen NPC, mit dem der Spieler sprechen kann.
- Wählen Sie ein Sprachmodell, das klein genug ist, um auf Ihrem schwächsten Zielgerät mit voller Bildrate zu laufen, und gut genug, um in der Rolle zu bleiben.
- Konvertieren und prüfen Sie es. Exportieren Sie in ein unterstütztes Format, prüfen Sie, dass jeder Operator unterstützt wird, und testen Sie die Ausgabequalität nach der Quantisierung.
- Richten Sie die Tokenisierung ein und die Generierungsschleife: Sampling, Stoppbedingungen und das Streamen von Tokens in die Oberfläche, ohne das Spiel zu blockieren.
- Schreiben Sie die Figur. Persona, Hintergrundgeschichte, Wissen und Leitplanken gehen in einen Prompt, und Sie verwalten das Gedächtnis, sobald das Gespräch über den Kontext des Modells hinauswächst.
- Fügen Sie Sprache-zu-Text und Text-zu-Sprache hinzu als zwei weitere Modelle, die Sie finden, konvertieren und neben dem Sprachmodell innerhalb desselben Speicherbudgets betreiben müssen.
- Verbinden Sie es mit dem Gameplay. Zerlegen Sie Antworten in Aktionen, beschreiben Sie dem Modell die Szene und steuern Sie die Animation über die Stimmung der Figur.
- Wiederholen Sie das für jede Plattform. Ein Modell, das auf einer Desktop-GPU läuft, passt vielleicht nicht auf ein Telefon oder ein eigenständiges Headset.
Jeder Schritt ist lösbar. Zusammen ergeben sie ein Machine-Learning-Projekt, das neben Ihrem Spiel läuft.
Auf dem Gerät oder gehostet: die Abwägungen
Figuren auf dem Gerät (Sentis und ähnliche Laufzeiten)
- Keine Serverkosten pro Gespräch, und Gespräche bleiben auf dem Gerät.
- Funktioniert offline, sobald die Modelle mit dem Spiel ausgeliefert werden.
- Modellgröße, Qualität und Tempo sind durch die Hardware des Spielers begrenzt.
- Eine Figur zu aktualisieren heißt, einen neuen Build auszuliefern.
Gehostete Figuren (Neocortex)
- Größere Modelle und gestreamte Stimme ohne Hardwarebudget auf Seiten des Spielers.
- Designer aktualisieren Persönlichkeit und Wissen im Editor, ohne neuen Build.
- Braucht eine Netzwerkverbindung und einen Tarif, der zu Ihrer Nutzung passt.
- Lokales Prototyping ist weiterhin möglich: Sie können Textchat mit lokalen Modellen über Ollama in Unity ausführen.
Sentis vs. Neocortex auf einen Blick
| Unity Sentis | Neocortex | |
|---|---|---|
| Was es ist | Laufzeit für neuronale Netze auf dem Gerät | Komplette Plattform für KI-Figuren |
| Figurendesign | Code und Prompts | Visueller Node-Editor |
| Sprachmodell | Sie bringen es mit, konvertieren und stimmen es ab | Von uns verwaltet, plus lokale LLMs über Ollama für Textprototypen |
| Stimme | Eigene Pipeline bauen | Gestreamte TTS und STT, Stimmklonen und -gestaltung |
| Gameplay-Anbindung | Selbst bauen | Aktionen, interagierbare Objekte, Emotionen pro Zeile |
| Story-Struktur | Selbst bauen | Conversation Flows mit flowState-Checkpoints |
| Engines | Unity | Unity, Unreal, Godot, Web-API |
| Preis | Kostenloses Paket, Ihre Entwicklungszeit | EUR 9, 29 oder 99 im Monat |
| Zeit bis zu einem sprechenden NPC | Ein Forschungsprojekt | In Minuten testen, in Stunden einbinden |
Warum Unity-Teams Neocortex für Figuren wählen
Die ML-Arbeit entfällt. Keine Modelle zu finden, zu konvertieren oder abzustimmen. Entwerfen Sie die Figur, installieren Sie das Unity-SDK für Unity 6 und öffnen Sie eine der sechs Beispielszenen.
Designer besitzen die Figur. Persönlichkeit, Emotion, Wissen, Absichten und Aktionen liegen in einem visuellen Graphen, den jeder im Team im Browser bearbeiten und testen kann.
Stimme inklusive. Spieler sprechen, Figuren antworten mit einer geklonten oder gestalteten Stimme, auch in Unity-WebGL-Builds mit Mikrofonunterstützung.
Antworten, die das Spiel steuern. Jede Zeile trägt ein Emotions-Tag, und Aktionen kommen als Daten an, etwa { "name": "OPEN_DOOR", "targetId": "door_02" }, die Ihre Skripte ausführen.
Sentis und Neocortex zusammen nutzen
Sentis und Neocortex schließen sich nicht aus. Nutzen Sie Sentis für die Wahrnehmung auf dem Gerät, etwa die Erkennung von Gesten oder Posen über die Kamera, und senden Sie das Erkannte als Spielereignis an eine Neocortex-Figur. Ein Spieler winkt, Sentis klassifiziert die Geste, Ihr Skript meldet sie, und die Figur grüßt mit ihrer Stimme zurück. Jedes Werkzeug übernimmt den Teil, für den es gebaut wurde.
Welches Sie wählen sollten
Wenn Ihr Ziel ein eigenes Modell auf der Hardware des Spielers ist, fangen Sie mit Sentis an. Wenn Ihr Ziel ein NPC ist, mit dem Spieler sprechen können, mit einer Persönlichkeit, die Ihre Designer steuern, einer eigenen Stimme und Aktionen in Ihrem Spiel, fangen Sie mit Neocortex an: Bauen Sie die Figur, lassen Sie sie in einer Beispielszene laufen und fügen Sie Sentis später für alles hinzu, was Sie auf dem Gerät erkennen wollen.
Die Unity-Angaben wurden zuletzt im Oktober 2026 geprüft.
Häufig gestellte Fragen
Kann Unity Sentis ein LLM für NPC-Dialoge ausführen?
Es kann kleine Sprachmodelle ausführen, die Sie selbst importieren und konvertieren, mit einem Tokenizer, der mit den Tokenizer-Dateien von Hugging Face kompatibel ist. Neocortex verwaltet das Sprachmodell für Sie und ergänzt Persönlichkeit, Wissen, Stimme und Aktionen in einem visuellen Editor.
Ist Unity Sentis dasselbe wie Inference Engine?
Ja. Das Paket wurde einige Versionen lang als Inference Engine angezeigt, und sein Anzeigename wurde mit Version 2.4 wieder auf Sentis gesetzt, während die Paket-ID com.unity.ai.inference blieb. Neocortex ist eine eigenständige Plattform für Figuren mit eigenem Unity-SDK für Unity 6.
Hat Unity ein eingebautes System für KI-NPCs?
Nein. Sentis ist eine Laufzeit für neuronale Netze, und Unity AI ist ein Assistent im Editor, der beim Bau Ihres Spiels hilft, kein System für Figuren zur Laufzeit. Neocortex stellt die Figuren zur Laufzeit bereit, mit sechs Unity-Beispielszenen zum Einstieg.
Kann ich KI-NPCs in Unity offline betreiben?
Mit Sentis ja, wenn Sie jedes Modell selbst finden, konvertieren und abstimmen. Mit Neocortex können Sie Textchat mit lokalen Modellen über Ollama in Unity prototypen und für Sprache und den visuellen Editor die gehostete Plattform nutzen.
Ist Unity Sentis kostenlos?
Sentis ist ein kostenloses Unity-Paket; die Kosten sind die Entwicklungszeit, um darauf eine Figur zu bauen.






