LLMUnity vs Neocortex: Lokale LLM-NPCs in Unity
LLMUnity führt Open-Source-LLMs offline in Unity aus. Wenn Sie zusätzlich Stimme, einen Figuren-Editor und mehrere Engines brauchen, zeigt dieser Beitrag, wo Neocortex passt.
Neocortex TeamThe team behind Neocortex
· Aktualisiert 20. Okt. 2026 · 5 Min. Lesezeit

Kurze Antwort: LLMUnity ist eine kostenlose Bibliothek, die Open-Source-LLMs in einem Unity-Build ausführt, sodass die Textgenerierung vollständig auf dem Gerät des Spielers stattfindet. Wenn Sie sprechende Figuren, einen Figuren-Editor für Ihre Autoren oder mehr als eine Engine brauchen, deckt Neocortex das ab und erlaubt Ihnen trotzdem, mit lokalen Modellen in Unity zu prototypen. Wenn Sie nach „ein LLM lokal in Unity ausführen“ gesucht haben, sind Sie bei LLMUnity gelandet. Es ist ein Open-Source-Paket von undream.ai unter der Apache-2.0-Lizenz, das Modelle über llama.cpp in Ihrem Spiel ausführt, ohne Server und ohne dass Daten das Gerät verlassen. Dieser Beitrag erklärt, was es Ihnen bietet, welche Abwägungen lokale und Cloud-Inferenz mit sich bringen und wann eine LLMUnity-Alternative Ihrem Team Zeit spart.
LLMUnity in einer Minute
- Läuft auf PC, Android, iOS und VR, getestet mit Unity 2021 LTS bis Unity 6.
- Hardware: Inferenz auf der CPU, dazu GPU-Unterstützung für NVIDIA, AMD und Apple Metal.
- Modelle: Ein eingebauter Manager lädt oder lädt GGUF-Modelle, mit LoRA-Unterstützung. Die Option „Download on Build“ holt das Modell beim ersten Start, statt es mitzuliefern.
- Retrieval: Ein RAG-System mit Approximate-Nearest-Neighbour-Suche und Embeddings aus dem Modell.
- Strukturierte Ausgabe: Grammatiken und JSON-Schema, um Antworten zu begrenzen, plus ein Beispiel für Funktionsaufrufe.
- Chatverlauf: Gespräche speichern und laden.
- Remote-Modus: Sie können einen Server-Build betreiben, und Figuren in einem anderen Projekt verbinden sich über die Host-Adresse damit.
- Preis: kostenlos für private und kommerzielle Nutzung.
Kann LLMUnity ohne Server laufen?
Ja, und genau darum geht es. Alles läuft im Build, das heißt keine API-Rechnung und keine Netzabhängigkeit. Es bedeutet aber auch, dass jede Entscheidung, die eine gehostete Plattform für Sie trifft, bei Ihrem Team landet. Sie wählen das Modell, testen es auf Ihrer schwächsten Zielhardware und halten es im Speicher, der nach den eigenen Assets Ihres Spiels übrig bleibt. Auf Telefonen empfiehlt LLMUnity kleine Modelle mit etwa 1 bis 2 Milliarden Parametern, was begrenzt, wie gut eine Figur ihre Persona über ein langes Gespräch hält. Die Prompts, die Gedächtnislogik und die Leitplanken schreiben Sie selbst. Im Paket gibt es keine Sprachausgabe und keine Spracherkennung, Sprache ist also eine eigene Integration. Figuren werden im Inspector und in C# konfiguriert, daher braucht ein Autor, der eine Persönlichkeit ändern will, einen Programmierer oder einen Editor-Build. Und wenn das Gerät eines Spielers das Modell nicht ausführen kann, ist die Rückfalllösung ein Server, den Sie selbst betreiben, über den Remote-Modus.
Lokal, hybrid oder Cloud: die passende Wahl
| Vollständig lokal (LLMUnity) | Lokal beim Prototyping, Cloud zum Start | Cloud | |
|---|---|---|---|
| Kosten pro Gespräch | Keine | Keine während der Entwicklung, danach Nutzung planen | Nutzung nach Plan |
| Funktioniert offline | Ja | Während der Entwicklung | Nein |
| Modellqualität auf schwachen Geräten | Durch das Gerät begrenzt | Zum Start nicht durch das Gerät begrenzt | Nicht durch das Gerät begrenzt |
| Stimme | Selbst bauen | In der Cloud enthalten | Enthalten |
| Wer Figuren bearbeitet | Programmierende | Jeder mit dem Editor | Jeder mit dem Editor |
| Build-Größe | Wächst mit dem Modell | Unverändert | Unverändert |
Die mittlere Spalte ist der Weg, den Neocortex in Unity unterstützt. Sie können lokale LLMs in Unity ausführen über Ollama für Textchats, während Sie bauen, und dann dasselbe Projekt für Spieler auf unsere Cloud zeigen lassen. Wenn Ihr Studio die ganze Plattform auf eigenen Servern braucht, ist Selbst-Hosting als individuelle Enterprise-Vereinbarung verfügbar.
Ein NPC, zwei Wege
Nehmen wir eine Händlerin in einem PC-Survival-Spiel, die feilscht, sich merkt, was sie verkauft, und den Spieler vor einem Sturm warnt.
Mit LLMUnity wählen Sie ein GGUF-Modell, das im Speicher neben Ihrem Spiel passt, richten das RAG-System mit ihrer Preisliste und ihrer Lore ein und schreiben einen Systemprompt in C#. Beim Feilschen begrenzen Sie ihre Antworten mit einem JSON-Schema, damit Ihr Code den angebotenen Preis lesen kann. Für eine Stimme fügen Sie ein eigenes TTS-Paket und ein Paket zur Spracherkennung hinzu und kümmern sich um die Verzögerung zwischen allen dreien. Jede Änderung an ihrer Persönlichkeit läuft über einen Programmierer.
Mit Neocortex baut eine Autorin sie im Browser: Persönlichkeit für ihren Ton, Wissen mit der Preisliste als PDF, Absichten für Kauf und Verkauf und eine Aktion wie OFFER_PRICE, die Ihr Spiel liest.
Ihr Spiel sendet den Sturm als aktuelles Ereignis.
Sie antwortet mit einer Zeile, einem Emotions-Tag und ihrer Aktion, in einer gestreamten Stimme, die Sie aus einer Textbeschreibung entworfen haben.
Während Sie bauen, kann ihr Textchat über ein lokales Modell mit Ollama laufen. Zum Start läuft sie in unserer Cloud mit ihrer Stimme.
LLMUnity vs Neocortex
| LLMUnity | Neocortex | |
|---|---|---|
| Was es ist | Open-Source-Bibliothek für lokale Inferenz | Plattform für KI-Figuren |
| Lokale KI | Vollständig auf dem Gerät | Lokale Modelle über Ollama in Unity für Textchats |
| Cloud-Option | Eigener Server-Build | Eingebaut |
| Figurendesign | Inspector und C# | Visueller Node-Editor: Agent, Persönlichkeit, Emotion, Wissen, Welt, Objekte, Absichten, Aktionen, Sprache, Akzent, Stimme |
| Wissen | RAG, das Sie im Code einrichten | Wissens-Node mit PDF- oder TXT-Dateien |
| Stimme | Nicht enthalten | Gestreamte TTS und STT, geklonte oder entworfene Stimmen |
| Spiel-Hooks | Funktionsaufrufe, die Sie selbst anbinden | Antworten mit Emotions-Tags und Aktionen wie OPEN_DOOR |
| Engines | Unity | Unity 6 (sechs Beispielszenen), Unreal Engine 5, Godot, Web-API |
| Preis | Kostenlos | Starter EUR 9 im Monat; Pro EUR 29 im Monat für kommerzielle Nutzung |
Neocortex übernimmt außerdem die Teile eines Spielgesprächs, die über dem Modell liegen.
Conversation Flows verzweigen eine Szene in Story-Momente und liefern Checkpoint-Schlüsselwörter (flowState), auf die Ihr Spiel reagiert.
Gruppenchat bringt bei Pro und Team bis zu sechs Figuren in ein Gespräch.
Unity-WebGL-Builds erhalten Mikrofoneingabe, sodass auch Spieler im Browser mit Figuren sprechen können.
Wie es weitergeht
Wenn Ihr Spiel ganz ohne Netzwerk laufen muss, gibt Ihnen LLMUnity die Inferenz, und die Figurenschicht bauen Sie selbst darum herum. Wenn Sie Figuren wollen, die sprechen, handeln und richtig klingen, ohne diese Schicht selbst zu bauen, starten Sie im Neocortex-Editor: Bauen Sie eine Figur, testen Sie sie im Browser und führen Sie sie in einer Unity-Beispielszene mit einem lokalen Modell oder unserer Cloud im Hintergrund aus.
Angaben zu LLMUnity zuletzt geprüft im Oktober 2026.
Häufige Fragen
Ist LLMUnity kostenlos?
Ja, LLMUnity ist Open Source unter der Apache-2.0-Lizenz und für kommerzielle Nutzung kostenlos, allerdings hat jedes Modell, das Sie ausliefern, seine eigene Lizenz. Kommerzielle Spiele auf Neocortex nutzen Pro für EUR 29 im Monat oder Team für EUR 99 im Monat.
Unterstützt LLMUnity Sprache?
Nein, LLMUnity deckt Textgenerierung, Embeddings und Retrieval ab, ohne Sprachausgabe oder Spracherkennung. Neocortex enthält gestreamte TTS und STT sowie individuelle Stimmen, durch Klonen oder Stimmdesign.
Kann LLMUnity auf dem Handy laufen?
Ja, LLMUnity läuft auf Android und iOS, empfohlen werden kleine Modelle mit etwa 1 bis 2 Milliarden Parametern. Neocortex betreibt Figuren in der Cloud und erlaubt Prototypen mit lokalen Modellen über Ollama in Unity für Textchats.
Funktioniert LLMUnity in Unreal oder Godot?
Nein, LLMUnity ist ein Unity-Paket. Neocortex unterstützt Unity, Unreal Engine 5, Godot und jede Sprache über seine Web-API.
Was ist die beste LLMUnity-Alternative?
Wenn Sie sprechende Figuren wollen, die Autoren ohne Code bearbeiten können, bringt Neocortex einen visuellen Node-Editor, Streaming-Stimmen und SDKs für mehrere Engines. Außerdem können Sie weiterhin mit lokalen Modellen in Unity prototypen.






