Neocortex Logo

MSFS KI-Copilot: Sprachbefehle und ein KI-Erster-Offizier

Bauen Sie einen MSFS-KI-Copiloten mit SimConnect und Neocortex: einen KI-Ersten-Offizier für Checklisten, Sprachbefehle auf dem Gerät für Fahrwerk und Klappen und Trainingsquiz.

Neocortex TeamThe team behind Neocortex

· 6 Min. Lesezeit

Bauen Sie einen MSFS-KI-Copiloten mit SimConnect und Neocortex: einen KI-Ersten-Offizier für Checklisten, Sprachbefehle auf dem Gerät für Fahrwerk und Klappen und Trainingsquiz.

Wenn Sie in Microsoft Flight Simulator einen langen Abschnitt allein fliegen, müssen Sie jede Checkliste, jeden Schalter und jeden Ansagetext selbst abarbeiten. Ein MSFS-KI-Copilot nimmt Ihnen die Hälfte dieser Arbeit ab: einen Ersten Offizier, der die Checkliste vorliest, prüft, ob das Fahrwerk wirklich unten ist, auf „Wie viel Treibstoff haben wir am Ziel?“ antwortet und die Klappen auf Zuruf bewegt. Neocortex stellt Ihrer SimConnect-App den KI-Charakter, Conversation Flows, eine Quiz-Engine und Sprachbefehle auf dem Gerät bereit, mit denen Sie ihn bauen, für MSFS 2020 und MSFS 2024.

Screenshot aus Microsoft Flight Simulator 2024 Screenshot: Microsoft Flight Simulator 2024 © Xbox Game Studios

SimConnect-App oder WASM-Modul?

MSFS-Erweiterungen, die eigenen Code brauchen, nutzen das SDK, das Sie nach dem Einschalten des Developer Mode direkt im Sim herunterladen. Code läuft an einem von zwei Orten, und diese Wahl bestimmt, wie Ihr Copilot aufgebaut wird.

Ein SimConnect-Client ist eine eigenständige App, die sich mit dem laufenden Sim verbindet. Sie wird in C, C++ oder einer beliebigen .NET-Sprache über den Managed-Wrapper geschrieben. Die SDK-Dokumentation empfiehlt diesen Weg, weil ein Absturz in Ihrer App den Sim in der Regel nicht mitreißt. Sie liest SimVars, sendet Tastenereignisse mit SimConnect_TransmitClientEvent, ruft Web-APIs auf, nutzt das Mikrofon und spielt Audio ab wie jede Windows-App.

Ein WASM-Modul ist C++-Code, der zu WebAssembly kompiliert wird und im Sim läuft. Seine Network API kann HTTPS-Anfragen stellen, mit einem kleinen Limit für Anfragen, die gleichzeitig laufen.

Für einen KI-Copiloten ist die externe SimConnect-App der natürliche Ort. Zeigen Sie die Untertitel in einem kleinen Fenster auf einem zweiten Bildschirm oder als Overlay. Dieselbe App funktioniert mit MSFS 2020, dokumentiert im MSFS 2020 SimConnect SDK, und das SDK von 2024 hält für 2020 gebaute Module lauffähig.

Sprachbefehle, zugeordnet zu SimConnect-Tastenereignissen

Kurze Cockpit-Befehle müssen sofort wirken. Sie entwerfen einen Befehlssatz mit Akteuren („Erster Offizier“, „Copilot“), Aktionen („Fahrwerk einfahren“, „Fahrwerk ausfahren“, „Klappen“, „Licht an“, „einschalten“) und Objekten („Landescheinwerfer“, „Blitzlicht“, „Navigationslichter“, „Autopilot“). Ihre App ordnet jeden erkannten Befehl einem Tastenereignis zu:

Der Pilot sagtIhre App sendet
„Fahrwerk einfahren“ / „Fahrwerk ausfahren“GEAR_UP / GEAR_DOWN (oder GEAR_TOGGLE)
„Klappen zwei Stufen ausfahren“FLAPS_INCR zweimal, weil die Menge mit dem Befehl kommt
„Klappen einfahren“FLAPS_DECR
„Landescheinwerfer an“LANDING_LIGHTS_TOGGLE
„Blitzlicht an“STROBES_TOGGLE
„Navigationslichter an“TOGGLE_NAV_LIGHTS
„Autopilot einschalten“AP_MASTER

„Fahrwerk einfahren, Klappen einfahren“ kommt als zwei Befehle an. Die Erkennung läuft auf dem PC des Spielers ohne Umweg über die Cloud, daher funktioniert sie auch auf einem fünfstündigen Flug offline.

Add-on-Flugzeuge mit detaillierten Systemen laufen oft mit eigener Logik. Prüfen Sie deshalb, wie jedes davon seine Schalter bereitstellt, bevor Sie Befehle zuordnen.

Voice Commands ist ein lizenziertes SDK: Kontaktieren Sie uns für eine Voice-Commands-Lizenz.

Screenshot aus Microsoft Flight Simulator 2024 Screenshot: Microsoft Flight Simulator 2024 © Xbox Game Studios

Ein Flug mit Ihrem KI-Ersten-Offizier

Ein Conversation Flow hält den Flug auf Kurs, vom Vorbereiten bis zum Abschalten der Triebwerke. Er gibt Checkpoint-Schlüsselwörter wie TAXI_CHECK_DONE oder APPROACH_BRIEFED zurück, auf die Ihre App reagiert.

Im Reiseflug trägt jede Nachricht Live-Flugdaten als Ereignisse mit sich: Höhe, Geschwindigkeit, Treibstoff, Klappenstellung, nächster Wegpunkt. Fragen Sie „Wie viel Treibstoff haben wir bei der Landung?“ oder „Wie hoch liegt der Platz?“, dann antwortet der Erste Offizier aus den Zahlen und den Flugzeugnotizen, die Sie in seinen Knowledge-Node hochgeladen haben.

Vor der Landung ruft der Erste Offizier „Landing checklist“ auf und arbeitet sie im Frage-und-Antwort-Format ab. Ihre App prüft jede Antwort anhand der SimVars, sodass „Fahrwerk unten, drei grün“ nur gilt, wenn das Fahrwerk wirklich unten ist. Gibt der Charakter eine Aktion zurück, etwa { "name": "LANDING_LIGHTS_ON", "targetId": "landing_lights" }, sendet Ihre App das passende Ereignis an den Sim.

Lernzeit im Reiseflug

Machen Sie den Reiseflug zur Lernzeit. Ein Fluglehrer-Charakter stellt Quizfragen zu Phraseologie, Lufträumen und METAR-Dekodierung: „Was bedeutet Squawk 7600?“ „Was heißt BKN in einem METAR?“ Die Quiz-Engine (Team-Plan) übernimmt Fragen, Bewertung und eine Rangliste für Ihre virtuelle Flugschule, und der Lehrer erklärt jede Antwort. Behandeln Sie sie als Lernhilfe, nicht als Ersatz für echte Ausbildung.

Für den Sim gibt es bereits KI-gesteuerte Sprach-Flugsicherungs-Add-ons. Dieser Leitfaden konzentriert sich auf die Cockpit-Seite.

Die Neocortex-Seite eines MSFS-KI-Copiloten

  • Dialog. Die App liest den Flugzustand, sendet ihn über /v3/chat an einen Neocortex-Charakter, zeigt die Antwort als Untertitel, spielt die Stimme aus /v3/audio/generate oder /v3/audio/stream ab und führt die vom Charakter zurückgegebenen Aktionen über SimConnect aus.
  • Conversation Flows. Flows steuern die Flugphasen und geben Checkpoint-Schlüsselwörter zurück, auf die die App reagiert.
  • Quizze. Die Quiz-Engine führt die Trainingsfragen über /v3/quiz aus.
  • Sprachbefehle. Neocortex Voice Commands läuft auf dem Rechner des Spielers und wandelt gesprochene Sätze ohne Cloud-Umweg in Cockpit-Aktionen um.

Charaktere entstehen in einem visuellen Node-Editor mit Persönlichkeits-, Emotions-, Wissens-, Sprach- und Stimm-Nodes, in über 20 Sprachen mit Akzenten. Ihr Erster Offizier kann also auf Französisch oder Spanisch briefen. Auf den Pro- und Team-Plänen können bis zu sechs Charaktere an einer Unterhaltung teilnehmen, etwa der Kapitän im Austausch mit dem Ersten Offizier und einem Mitglied der Kabinenbesatzung. Wie sich Neocortex im Vergleich zu anderen KI-Charakter-Plattformen schlägt, zeigt unsere Vergleichsseite.

Geteilte Cockpits und Online-Netzwerke

Halten Sie sich an die Lizenzbedingungen des MSFS SDK und an Microsofts Game Content Usage Rules. Ein kostenloses, nicht kommerzielles Projekt bleibt kostenlos. Fliegen Sie allein damit. In geteilten Cockpits, Multiplayer-Sitzungen oder Online-ATC-Netzwerken nutzen Sie es nur dort, wo deren Regeln es erlauben. Jeder Spieler verwendet seinen eigenen Neocortex-API-Schlüssel.

Mit einem Flugzeug anfangen

  1. Installieren Sie das SDK über den Developer Mode des Sims und bauen Sie eine einfache SimConnect-App in C# oder C++.
  2. Entwerfen Sie den Ersten Offizier im Neocortex-Dashboard, mit Ihren Flugzeugnotizen als Wissen, einem Flow für die Flugphasen und einem Satz Trainingsfragen. Testen Sie ihn im Browser.
  3. Entwerfen Sie einen Befehlssatz fürs Cockpit für Fahrwerk, Klappen, Licht und Autopilot, mit ein paar Beispielsätzen pro Aktion.
  4. Verbinden Sie die App. Rufen Sie /v3/chat außerhalb des SimConnect-Threads auf, verwenden Sie dieselbe sessionId für den ganzen Flug und ordnen Sie die zurückgegebenen Aktionen Tastenereignissen zu.
  5. Bewahren Sie den API-Schlüssel in einer Konfigurationsdatei auf, die der Spieler ausfüllt, nie fest im Code eines geteilten Add-ons.
  6. Testen Sie offline in einem Standardflugzeug mit Push-to-Talk, bevor Sie zu Add-on-Flugzeugen wechseln.

Ein Standardflugzeug und die Landing-Checkliste reichen für einen ersten Flug mit einem Neocortex-Ersten-Offizier. Für die Sprachseite im Detail lesen Sie Sprachbefehle auf dem Gerät für Spiel-Mods. Lieber auf der Straße unterwegs? Dann sehen Sie sich unseren Leitfaden zum KI-Co-Piloten-Mod für Euro Truck Simulator 2 an oder die vollständige Übersicht über KI-NPC- und Sprachbefehl-Mods.

Werkzeugversionen und Links geprüft im Oktober 2026. Modding-Werkzeuge ändern sich oft. Prüfen Sie auf der Seite jedes Projekts die neueste Version.

Häufig gestellte Fragen

Kann man einen KI-Copiloten in Microsoft Flight Simulator einbauen?

Ja. Eine externe SimConnect-App kann Flugdaten aus MSFS 2020 oder 2024 lesen, mit einem KI-Charakter sprechen und Steuerungsereignisse zurück an den Sim senden. Ein Neocortex-Erster-Offizier kann Checklisten abarbeiten, Fragen beantworten und Aktionen zurückgeben, die Ihre App ausführt.

Kann ich MSFS mit Sprachbefehlen steuern?

Ja. SimConnect stellt Tastenereignisse für Fahrwerk, Klappen, Licht und Autopilot bereit. Jede App, die Sprache in diese Ereignisse umwandelt, ermöglicht also Sprachsteuerung. Neocortex Voice Commands übernimmt das Zuhören und Erkennen auf dem PC des Spielers, offline, und gibt Ihrer App den Befehl weiter.

Funktioniert ein MSFS-KI-Copilot in MSFS 2020 und 2024?

SimConnect ist in beiden Sims verfügbar, und das MSFS-2024-SDK hält für 2020 gebaute Module lauffähig. Eine Neocortex-Copilot-App kann beide Versionen ansprechen, die KI-Seite läuft über dieselbe Web-API.

Kann ein Flugsimulator-Quiz beim Pilotentraining helfen?

Ein Quiz zu Phraseologie, Luftraum und METAR-Dekodierung ist eine gute Lernhilfe, ersetzt aber keine echte Flugausbildung. Die Neocortex-Quiz-Engine (Team-Plan) übernimmt Fragen, Bewertung und eine Rangliste, und ein Charakter kann jede Antwort erklären.

Brauche ich Internet für MSFS-Sprachbefehle mit Neocortex?

Nein. Neocortex Voice Commands läuft auf dem PC des Spielers, daher funktionieren Befehle für Fahrwerk, Klappen und Licht offline und reagieren sofort. Die Unterhaltung des KI-Ersten-Offiziers nutzt die Neocortex-API.

Ähnliche Beiträge

Weiterlesen