KI-NPCs für Unity WebGL und Browserspiele - was 2026 funktioniert
Unity hat in WebGL-Builds keinen Mikrofoneingang. Welche KI-NPC-Tools im Browser funktionieren und wie Sie Figuren mit Stimme in Unity WebGL zum Laufen bringen.
Neocortex TeamThe team behind Neocortex
· Aktualisiert 20. Okt. 2026 · 6 Min. Lesezeit

Ihr KI-NPC funktioniert im Unity-Editor einwandfrei. Sie drücken auf Build, laden den WebGL-Build auf itch.io hoch, öffnen den Link, drücken den Sprechen-Button, und nichts passiert. Kein Fehler, kein Transkript, keine Antwort. Die Figur steht einfach nur da.
Das ist der häufigste Grund, warum KI-NPCs in Browserspielen versagen, und die Ursache ist simpel: Unity unterstützt die Klasse Microphone in WebGL-Builds nicht. Browserspiele sind immer noch der schnellste Weg, ein Spiel vor Spieler zu bringen (keine Installation, ein Link), deshalb behandelt dieser Beitrag, warum die Sprache versagt, welche KI-NPC-Tools in Unity WebGL und im Browser funktionieren und wie Sie einen Charakter mit Stimme ausliefern, der beim ersten Klick läuft.
Warum die Sprache in WebGL-Builds versagt
Auf dem Desktop liest Unity das Mikrofon direkt. Im Browser kann es das nicht: Der Browser besitzt das Mikrofon, setzt es hinter eine Berechtigungsabfrage und stellt es nur JavaScript zur Verfügung. Die eingebaute Microphone-API von Unity ist in WebGL nicht verfügbar, daher schlägt jedes KI-NPC-Tool, das darauf setzt, im Editor zwar funktioniert, aber im Browser-Build stillschweigend fehl.
Auch die Audioausgabe hat einen Haken. Einige der skriptbaren Audio-Callbacks von Unity sind in WebGL ebenfalls nicht verfügbar, deshalb brauchen Tools, die Sprache darüber streamen, einen Audiopfad im Browser. Und Browser setzen zwei eigene Regeln drauf: Die Seite muss über HTTPS ausgeliefert werden, und Audio kann erst starten, nachdem der Spieler klickt oder tippt.
Ein Tool, das in WebGL funktioniert, muss all das über eine Brücke zwischen dem Audio des Browsers und Unity lösen.
Welche KI-NPC-Tools in Unity WebGL und im Browser funktionieren
| Tool | Unity WebGL | Spracheingabe in WebGL | Reines Web oder JS | Hinweise |
|---|---|---|---|---|
| Neocortex | Ja | Ja, über die WebGL-Vorlage des SDK | Web SDK (npm) und Web API | Dieselben Charaktere in WebGL, Desktop, auf Mobilgeräten und in anderen Engines |
| Convai | Ja, in seiner Unity-Plattformmatrix aufgeführt | Ja, HTTPS und eine Nutzeraktion erforderlich | Web SDK, PlayCanvas-Plugin | Entfernte Audiodaten werden über den Browser abgespielt, nicht über den AudioSource von Unity |
| Inworld | Nicht für das Unity Runtime SDK aufgeführt | Nicht dokumentiert | Node.js Runtime SDK | Das alte Unity SDK enthielt ein WebGL-Mikrofon-Plugin |
| Charisma.ai | Nicht dokumentiert | Nicht dokumentiert | JS- und React-SDKs mit Hilfsfunktionen für Spracherkennung | Auf Geschichten ausgerichtet, nur in der Cloud |
| Player2 | WebGL-Audioskripte im Unity-SDK-Repository, nicht als Plattform dokumentiert | Unklar | API direkt nutzen | Spieler brauchen ein Player2-Konto |
| ElevenLabs Agents | Frühe Unity-SDK-Version mit WebGL-Brücke, Unity 6.3 LTS oder neuer | Ja, über die Brücke | Browser-SDK über WebRTC | Sprachagenten, keine Spielfiguren |
Einen sprechenden NPC in sechs Schritten nach Unity WebGL bringen
Neocortex löst das Mikrofonproblem mit einer WebGL-Vorlage, die das Audio des Browsers mit Unity verbindet. Wie das funktioniert, haben wir in diesem Beitrag beschrieben. Die Kurzfassung:
- Installieren Sie das Neocortex Unity SDK. Die WebGL-Vorlage wird damit importiert. Sie können sie auch über
Tools > Neocortex > Import WebGL Templateimportieren. - Stellen Sie das Build-Ziel auf WebGL um.
- Wählen Sie die Vorlage aus. Stellen Sie unter
Project Settings > Player > Resolution and Presentationdie WebGL-Vorlage auf Neocortex. Sie können die Vorlage an Ihre Seite anpassen. - Starten Sie mit dem WebGL-Audiobeispiel. Importieren Sie die Beispiele über den Package Manager und fügen Sie die Szene Ihrem Build hinzu.
- Starten Sie das Mikrofon mit einem Klick. Verknüpfen Sie die Aufnahme mit einem Button oder einer Taste, die der Spieler drückt, damit die Berechtigungsabfrage des Browsers zu einem sinnvollen Zeitpunkt erscheint.
- Bauen und testen Sie über HTTPS. Laden Sie den Build auf einen Host, der HTTPS ausliefert, und testen Sie in mindestens zwei Browsern.
Dieselben Sprachkomponenten, die Sie auf dem Desktop verwenden, funktionieren dann auch im Browser, und Antworten kommen in der Stimme des Charakters zurück.
Vor dem Hochladen: eine Checkliste für Browser-Builds
- HTTPS. Browser erlauben den Mikrofonzugriff nur auf sicheren Seiten.
localhostist während der Entwicklung die Ausnahme. - Eine Nutzeraktion. Mikrofon und Audio starten erst, nachdem der Spieler klickt oder tippt.
- Iframes. Wenn Ihr Spiel in einer anderen Seite läuft (viele Spieleportale machen das), braucht das iframe die Erlaubnis, das Mikrofon zu nutzen.
- Schlüssel. Behandeln Sie alles in einem WebGL-Build als öffentlich, denn jeder kann es lesen. Prüfen Sie, welche Schlüssel Ihr Build enthält und was sie erlauben.
- Build-Größe. Lokale Modelle sind im Browser selten praktikabel, deshalb ist Inferenz in der Cloud die Regel.
- Ein Fallback. Bieten Sie eine Texteingabe für Spieler an, die die Mikrofonabfrage ablehnen.
Häufige Fragen vor dem Ausliefern eines Browser-Builds
Kann ich ein lokales Modell in einem WebGL-Build laufen lassen?
Selten. Modelldateien reichen von hunderten Megabyte bis zu mehreren Gigabyte, was für ein Browserspiel ein langer Download ist, und WebGL-Builds haben enge Speichergrenzen. Inferenz in der Cloud hält den Build klein und das erste Gespräch schnell.
Müssen Spieler den Mikrofonzugriff jedes Mal erlauben?
Browser fragen beim ersten Mal, wenn eine Seite das Mikrofon anfordert, und merken sich die Antwort pro Seite nach den eigenen Regeln jedes Browsers. Planen Sie für Spieler ein, die ablehnen.
Kann ich dieselbe Figur in einem einfachen Webspiel nutzen?
Ja. Die Web API von Neocortex funktioniert aus jeder Sprache heraus, sodass eine Figur, die Sie für Unity WebGL gebaut haben, auch in einem JavaScript-Spiel, auf einer Website oder in einem Backend-Dienst sprechen kann.
Funktioniert es auf itch.io und anderen Spieleportalen?
Viele Portale betten Ihren Build in ein iframe auf ihrer eigenen Seite ein. Der Mikrofonzugriff hängt dann von den Berechtigungen ab, die dieses iframe gewährt. Testen Sie die Sprache deshalb auf dem Portal selbst und nicht nur auf Ihrem eigenen HTTPS-Host, und behalten Sie die Texteingabe als Fallback für Spieler, deren Browser sie blockiert.
Was sollen Spieler sehen, während die Figur antwortet?
Ein Browserspiel hat zwischen den Zeilen keinen Ladebildschirm, deshalb zeigen Sie den Zustand. Zeigen Sie das Transkript, sobald die Spracherkennung es liefert, eine Anzeige „denkt nach“, bis die Antwort ankommt, und lassen Sie die gestreamte Stimme so früh wie möglich beginnen. Spieler verzeihen eine kurze Wartezeit, die sie sehen. Einen Button, der nichts zu tun scheint, verzeihen sie nicht.
Was ändert sich zwischen meinem WebGL-Build und meinem Desktop-Build?
Mit Neocortex bleibt die Figur dieselbe. Sie schalten für Browser-Builds die WebGL-Vorlage ein, und die Sprachkomponenten erledigen den Rest.
Die Kurzfassung
Sprache in WebGL braucht eine Brücke zwischen dem Mikrofon des Browsers und Unity, und die meisten KI-NPC-Tools überlassen Ihnen diese Aufgabe oder dokumentieren sie nur lückenhaft. Neocortex liefert die Brücke im SDK mit: Mikrofoneingabe und gestreamte Sprachantworten im Browser, eine Figur, die in Ihrem WebGL-Build, Ihrem Desktop-Build und über die Web API läuft, sowie einen visuellen Editor, in dem Designer Persönlichkeit, Emotion, Wissen, Absichten und Aktionen festlegen und im Browser testen, bevor es einen Build gibt.
Die Tool-Details wurden zuletzt im Oktober 2026 geprüft.
Häufig gestellte Fragen
Unterstützt Unity das Mikrofon in WebGL?
Nein, die eingebaute Klasse Microphone von Unity funktioniert in WebGL-Builds nicht. Das Neocortex Unity SDK enthält eine WebGL-Vorlage, die das Mikrofon des Browsers in Unity einbindet, damit Sprach-NPCs im Browser funktionieren.
Funktioniert Convai in Unity WebGL?
Ja, Convai führt WebGL in seiner Unity-Plattformmatrix auf und verlangt für das Mikrofon HTTPS und eine Nutzeraktion. Neocortex unterstützt die Spracheingabe in Unity WebGL ebenfalls, mit denselben Charakteren, die Sie auf dem Desktop, in Unreal und in Godot nutzen.
Hat ElevenLabs ein Unity-SDK?
Ja, ElevenLabs hat ein frühes ElevenAgents-SDK für Unity 6.3 LTS und neuer, mit einer WebGL-Brücke, das für Sprachagenten gebaut ist. Neocortex bietet Spielfiguren mit Persönlichkeit, Wissen, Emotion und Aktionen, die Sie in einem visuellen Editor gestalten.
Warum funktioniert das Mikrofon meines KI-NPCs im Unity-Editor, aber nicht im Browser?
Die Microphone-API von Unity ist in WebGL nicht verfügbar, deshalb hat der Browser-Build keine Audioeingabe. Stellen Sie Ihren Build auf die WebGL-Vorlage von Neocortex um, dann funktionieren dieselben Sprachkomponenten im Browser.
Brauchen Browserspiele für Sprachchat HTTPS?
Ja, Browser erlauben den Mikrofonzugriff nur auf sicheren Seiten, abgesehen von localhost während der Entwicklung. Hosten Sie Ihren Neocortex-WebGL-Build über HTTPS und starten Sie das Mikrofon nach einem Klick oder Tippen.






