Neocortex Logo

LLMUnity vs Neocortex: Lokale LLM-NPCs in Unity

LLMUnity führt Open-Source-LLMs offline in Unity aus. Wenn Sie zusätzlich Stimme, einen Figuren-Editor und mehrere Engines brauchen, zeigt dieser Beitrag, wo Neocortex passt.

Neocortex TeamThe team behind Neocortex

· Aktualisiert 20. Okt. 2026 · 5 Min. Lesezeit

LLMUnity führt Open-Source-LLMs offline in Unity aus. Wenn Sie zusätzlich Stimme, einen Figuren-Editor und mehrere Engines brauchen, zeigt dieser Beitrag, wo Neocortex passt.

Kurze Antwort: LLMUnity ist eine kostenlose Bibliothek, die Open-Source-LLMs in einem Unity-Build ausführt, sodass die Textgenerierung vollständig auf dem Gerät des Spielers stattfindet. Wenn Sie sprechende Figuren, einen Figuren-Editor für Ihre Autoren oder mehr als eine Engine brauchen, deckt Neocortex das ab und erlaubt Ihnen trotzdem, mit lokalen Modellen in Unity zu prototypen. Wenn Sie nach „ein LLM lokal in Unity ausführen“ gesucht haben, sind Sie bei LLMUnity gelandet. Es ist ein Open-Source-Paket von undream.ai unter der Apache-2.0-Lizenz, das Modelle über llama.cpp in Ihrem Spiel ausführt, ohne Server und ohne dass Daten das Gerät verlassen. Dieser Beitrag erklärt, was es Ihnen bietet, welche Abwägungen lokale und Cloud-Inferenz mit sich bringen und wann eine LLMUnity-Alternative Ihrem Team Zeit spart.

LLMUnity in einer Minute

  • Läuft auf PC, Android, iOS und VR, getestet mit Unity 2021 LTS bis Unity 6.
  • Hardware: Inferenz auf der CPU, dazu GPU-Unterstützung für NVIDIA, AMD und Apple Metal.
  • Modelle: Ein eingebauter Manager lädt oder lädt GGUF-Modelle, mit LoRA-Unterstützung. Die Option „Download on Build“ holt das Modell beim ersten Start, statt es mitzuliefern.
  • Retrieval: Ein RAG-System mit Approximate-Nearest-Neighbour-Suche und Embeddings aus dem Modell.
  • Strukturierte Ausgabe: Grammatiken und JSON-Schema, um Antworten zu begrenzen, plus ein Beispiel für Funktionsaufrufe.
  • Chatverlauf: Gespräche speichern und laden.
  • Remote-Modus: Sie können einen Server-Build betreiben, und Figuren in einem anderen Projekt verbinden sich über die Host-Adresse damit.
  • Preis: kostenlos für private und kommerzielle Nutzung.

Kann LLMUnity ohne Server laufen?

Ja, und genau darum geht es. Alles läuft im Build, das heißt keine API-Rechnung und keine Netzabhängigkeit. Es bedeutet aber auch, dass jede Entscheidung, die eine gehostete Plattform für Sie trifft, bei Ihrem Team landet. Sie wählen das Modell, testen es auf Ihrer schwächsten Zielhardware und halten es im Speicher, der nach den eigenen Assets Ihres Spiels übrig bleibt. Auf Telefonen empfiehlt LLMUnity kleine Modelle mit etwa 1 bis 2 Milliarden Parametern, was begrenzt, wie gut eine Figur ihre Persona über ein langes Gespräch hält. Die Prompts, die Gedächtnislogik und die Leitplanken schreiben Sie selbst. Im Paket gibt es keine Sprachausgabe und keine Spracherkennung, Sprache ist also eine eigene Integration. Figuren werden im Inspector und in C# konfiguriert, daher braucht ein Autor, der eine Persönlichkeit ändern will, einen Programmierer oder einen Editor-Build. Und wenn das Gerät eines Spielers das Modell nicht ausführen kann, ist die Rückfalllösung ein Server, den Sie selbst betreiben, über den Remote-Modus.

Lokal, hybrid oder Cloud: die passende Wahl

Vollständig lokal (LLMUnity)Lokal beim Prototyping, Cloud zum StartCloud
Kosten pro GesprächKeineKeine während der Entwicklung, danach Nutzung planenNutzung nach Plan
Funktioniert offlineJaWährend der EntwicklungNein
Modellqualität auf schwachen GerätenDurch das Gerät begrenztZum Start nicht durch das Gerät begrenztNicht durch das Gerät begrenzt
StimmeSelbst bauenIn der Cloud enthaltenEnthalten
Wer Figuren bearbeitetProgrammierendeJeder mit dem EditorJeder mit dem Editor
Build-GrößeWächst mit dem ModellUnverändertUnverändert

Die mittlere Spalte ist der Weg, den Neocortex in Unity unterstützt. Sie können lokale LLMs in Unity ausführen über Ollama für Textchats, während Sie bauen, und dann dasselbe Projekt für Spieler auf unsere Cloud zeigen lassen. Wenn Ihr Studio die ganze Plattform auf eigenen Servern braucht, ist Selbst-Hosting als individuelle Enterprise-Vereinbarung verfügbar.

Ein NPC, zwei Wege

Nehmen wir eine Händlerin in einem PC-Survival-Spiel, die feilscht, sich merkt, was sie verkauft, und den Spieler vor einem Sturm warnt.

Mit LLMUnity wählen Sie ein GGUF-Modell, das im Speicher neben Ihrem Spiel passt, richten das RAG-System mit ihrer Preisliste und ihrer Lore ein und schreiben einen Systemprompt in C#. Beim Feilschen begrenzen Sie ihre Antworten mit einem JSON-Schema, damit Ihr Code den angebotenen Preis lesen kann. Für eine Stimme fügen Sie ein eigenes TTS-Paket und ein Paket zur Spracherkennung hinzu und kümmern sich um die Verzögerung zwischen allen dreien. Jede Änderung an ihrer Persönlichkeit läuft über einen Programmierer.

Mit Neocortex baut eine Autorin sie im Browser: Persönlichkeit für ihren Ton, Wissen mit der Preisliste als PDF, Absichten für Kauf und Verkauf und eine Aktion wie OFFER_PRICE, die Ihr Spiel liest. Ihr Spiel sendet den Sturm als aktuelles Ereignis. Sie antwortet mit einer Zeile, einem Emotions-Tag und ihrer Aktion, in einer gestreamten Stimme, die Sie aus einer Textbeschreibung entworfen haben. Während Sie bauen, kann ihr Textchat über ein lokales Modell mit Ollama laufen. Zum Start läuft sie in unserer Cloud mit ihrer Stimme.

LLMUnity vs Neocortex

LLMUnityNeocortex
Was es istOpen-Source-Bibliothek für lokale InferenzPlattform für KI-Figuren
Lokale KIVollständig auf dem GerätLokale Modelle über Ollama in Unity für Textchats
Cloud-OptionEigener Server-BuildEingebaut
FigurendesignInspector und C#Visueller Node-Editor: Agent, Persönlichkeit, Emotion, Wissen, Welt, Objekte, Absichten, Aktionen, Sprache, Akzent, Stimme
WissenRAG, das Sie im Code einrichtenWissens-Node mit PDF- oder TXT-Dateien
StimmeNicht enthaltenGestreamte TTS und STT, geklonte oder entworfene Stimmen
Spiel-HooksFunktionsaufrufe, die Sie selbst anbindenAntworten mit Emotions-Tags und Aktionen wie OPEN_DOOR
EnginesUnityUnity 6 (sechs Beispielszenen), Unreal Engine 5, Godot, Web-API
PreisKostenlosStarter EUR 9 im Monat; Pro EUR 29 im Monat für kommerzielle Nutzung

Neocortex übernimmt außerdem die Teile eines Spielgesprächs, die über dem Modell liegen. Conversation Flows verzweigen eine Szene in Story-Momente und liefern Checkpoint-Schlüsselwörter (flowState), auf die Ihr Spiel reagiert. Gruppenchat bringt bei Pro und Team bis zu sechs Figuren in ein Gespräch. Unity-WebGL-Builds erhalten Mikrofoneingabe, sodass auch Spieler im Browser mit Figuren sprechen können.

Wie es weitergeht

Wenn Ihr Spiel ganz ohne Netzwerk laufen muss, gibt Ihnen LLMUnity die Inferenz, und die Figurenschicht bauen Sie selbst darum herum. Wenn Sie Figuren wollen, die sprechen, handeln und richtig klingen, ohne diese Schicht selbst zu bauen, starten Sie im Neocortex-Editor: Bauen Sie eine Figur, testen Sie sie im Browser und führen Sie sie in einer Unity-Beispielszene mit einem lokalen Modell oder unserer Cloud im Hintergrund aus.

Angaben zu LLMUnity zuletzt geprüft im Oktober 2026.

Häufige Fragen

Ist LLMUnity kostenlos?

Ja, LLMUnity ist Open Source unter der Apache-2.0-Lizenz und für kommerzielle Nutzung kostenlos, allerdings hat jedes Modell, das Sie ausliefern, seine eigene Lizenz. Kommerzielle Spiele auf Neocortex nutzen Pro für EUR 29 im Monat oder Team für EUR 99 im Monat.

Unterstützt LLMUnity Sprache?

Nein, LLMUnity deckt Textgenerierung, Embeddings und Retrieval ab, ohne Sprachausgabe oder Spracherkennung. Neocortex enthält gestreamte TTS und STT sowie individuelle Stimmen, durch Klonen oder Stimmdesign.

Kann LLMUnity auf dem Handy laufen?

Ja, LLMUnity läuft auf Android und iOS, empfohlen werden kleine Modelle mit etwa 1 bis 2 Milliarden Parametern. Neocortex betreibt Figuren in der Cloud und erlaubt Prototypen mit lokalen Modellen über Ollama in Unity für Textchats.

Funktioniert LLMUnity in Unreal oder Godot?

Nein, LLMUnity ist ein Unity-Paket. Neocortex unterstützt Unity, Unreal Engine 5, Godot und jede Sprache über seine Web-API.

Was ist die beste LLMUnity-Alternative?

Wenn Sie sprechende Figuren wollen, die Autoren ohne Code bearbeiten können, bringt Neocortex einen visuellen Node-Editor, Streaming-Stimmen und SDKs für mehrere Engines. Außerdem können Sie weiterhin mit lokalen Modellen in Unity prototypen.

Ähnliche Beiträge

Weiterlesen