Neocortex Logo

Sprachinteraktion

Sprechen und gehört werden

Die Sprachinteraktion von Neocortex gibt deinen Charakteren eine Stimme und lässt Spieler direkt antworten. Text-to-Speech spricht jede Zeile mit der eigenen Stimme des Charakters, Speech-to-Text macht aus der aufgenommenen Sprache des Spielers Text, und gestreamte Sprachausgabe beginnt schon zu spielen, während der Rest der Zeile noch generiert wird. Der Language-Node des Charakters legt die Sprache in beide Richtungen fest: Ein auf Spanisch eingestellter Charakter spricht und hört auf Spanisch.

Sprachinteraktion im Überblick

Sprache schließt den Kreis für vertonte Charaktere: Der Spieler spricht, der Charakter antwortet, und die Antwort erklingt in der eigenen Stimme des Charakters.

Drei zentrale Funktionen und ihre Vorteile

Jede Zeile, die ein Charakter spricht, kann eine Emotion tragen, und die Betonung folgt ihr: Dieselbe Stimme klingt je nach Moment wärmer oder angespannter. Speech-to-Text unterstützt mehr als 20 Sprachen. Weitere Vorteile:

  • Gestreamte Sprachausgabe schickt das Audio in Stücken, sobald es entsteht. So kann die Wiedergabe in deutlich weniger als der Hälfte der Zeit starten, die du auf die vollständige Zeile warten müsstest.

  • Charaktere sprechen mit einer Basisstimme, einer geklonten oder einer gestalteten Stimme, und dieselbe Stimme funktioniert für von der KI geschriebene Antworten genauso wie für deine eigenen geskripteten Zeilen. So klingen Barks und Gespräche nach derselben Person.

  • Ein Vocabulary-Node listet die Namen und Begriffe deiner Welt auf, damit Speech-to-Text "Varrowmere" auch als Varrowmere schreibt, statt zu raten.

Sprache ist über die Web API verfügbar, und die SDKs für Unity, Unreal und Godot übernehmen Mikrofon und Wiedergabe für dich, wahlweise mit Push-to-Talk oder Sprachaktivitätserkennung.