Neocortex Logo

MSFS AI Copilot: comandi vocali e un primo ufficiale IA

Costruisci un MSFS AI copilot con SimConnect e Neocortex: un primo ufficiale IA per le checklist, comandi vocali sul dispositivo per carrello e flap, e quiz di addestramento.

Neocortex TeamThe team behind Neocortex

· 6 min di lettura

Costruisci un MSFS AI copilot con SimConnect e Neocortex: un primo ufficiale IA per le checklist, comandi vocali sul dispositivo per carrello e flap, e quiz di addestramento.

Volare da soli una tratta lunga in Microsoft Flight Simulator significa eseguire da soli ogni checklist, ogni interruttore e ogni chiamata. Un MSFS AI copilot si prende metà di questo lavoro: un primo ufficiale che legge la checklist, controlla che il carrello sia davvero abbassato, risponde a "quanto carburante avremo a destinazione?" e muove i flap quando glielo dici. Neocortex dà alla tua app SimConnect il personaggio IA, i Conversation Flow, un motore di quiz e comandi vocali sul dispositivo per costruirlo, sia per MSFS 2020 sia per MSFS 2024.

Screenshot di gioco di Microsoft Flight Simulator 2024 Screenshot: Microsoft Flight Simulator 2024 © Xbox Game Studios

App SimConnect o modulo WASM?

I componenti aggiuntivi di MSFS che richiedono codice personalizzato usano l'SDK, che scarichi dall'interno del simulatore dopo aver attivato la Modalità sviluppatore. Il codice gira in uno di due posti, e la scelta determina come viene costruito il tuo copilota.

Un client SimConnect è un'app autonoma che si collega al simulatore in esecuzione, scritta in C, C++ o in qualsiasi linguaggio .NET tramite il wrapper gestito. La documentazione dell'SDK consiglia questa strada, perché un crash della tua app di solito non trascina giù il simulatore. Legge i SimVar, invia eventi chiave con SimConnect_TransmitClientEvent, chiama API web, usa il microfono e riproduce audio come qualsiasi app Windows.

Un modulo WASM è C++ compilato in WebAssembly che gira dentro il simulatore. La sua Network API può fare richieste HTTPS, con un piccolo limite al numero di richieste in corso contemporaneamente.

Per un copilota IA, la casa naturale è l'app SimConnect esterna. Mostra i sottotitoli in una piccola finestra su un secondo schermo o in un overlay. La stessa app funziona con MSFS 2020, documentato nell'SDK SimConnect di MSFS 2020, e l'SDK 2024 mantiene funzionanti i moduli costruiti per il 2020.

Comandi vocali collegati agli eventi chiave di SimConnect

I comandi brevi della cabina devono essere immediati. Progetti un insieme di comandi con attori ("primo ufficiale", "copilota"), azioni ("carrello su", "carrello giù", "flap", "luci accese", "inserisci") e oggetti ("luci di atterraggio", "stroboscopi", "luci di navigazione", "pilota automatico"), e la tua app associa ogni comando riconosciuto a un evento chiave:

Il pilota diceLa tua app invia
"Gear up" / "Gear down"GEAR_UP / GEAR_DOWN (oppure GEAR_TOGGLE)
"Flaps down two notches"FLAPS_INCR due volte, perché la quantità arriva con il comando
"Flaps up"FLAPS_DECR
"Landing lights on"LANDING_LIGHTS_TOGGLE
"Strobes on"STROBES_TOGGLE
"Nav lights on"TOGGLE_NAV_LIGHTS
"Engage autopilot"AP_MASTER

"Gear up, flaps up" arriva come due comandi. Il riconoscimento gira sul PC del giocatore senza andata e ritorno verso il cloud, quindi funziona anche offline durante una traversata di cinque ore.

I velivoli aggiuntivi di livello professionale spesso gestiscono i propri sistemi, quindi controlla come ciascuno espone i suoi interruttori prima di collegare i comandi.

Voice Commands è un SDK con licenza: contattaci per una licenza Voice Commands.

Screenshot di gioco di Microsoft Flight Simulator 2024 Screenshot: Microsoft Flight Simulator 2024 © Xbox Game Studios

Un volo con il tuo primo ufficiale IA

Un Conversation Flow tiene il volo sui binari, dal prima dell'avvio fino allo spegnimento, restituendo parole chiave di checkpoint come TAXI_CHECK_DONE o APPROACH_BRIEFED a cui la tua app reagisce.

In crociera, ogni messaggio porta con sé i dati di volo in tempo reale come eventi: altitudine, velocità, carburante, posizione dei flap, prossimo waypoint. Chiedi "quanto carburante avremo all'arrivo?" oppure "qual è la quota dell'aeroporto?" e il primo ufficiale risponde con i numeri e con le note sul velivolo che hai caricato nel suo nodo Knowledge.

Prima dell'atterraggio, il primo ufficiale chiama "Landing checklist" e la svolge in domanda e risposta. La tua app verifica ogni risposta con i SimVar, quindi "Gear down, three green" passa solo se il carrello è davvero abbassato. Quando il personaggio restituisce un'azione come { "name": "LANDING_LIGHTS_ON", "targetId": "landing_lights" }, la tua app invia l'evento corrispondente al simulatore.

Tempo di studio in crociera

Trasforma la crociera in tempo di studio. Un personaggio istruttore di volo conduce un quiz su fraseologia, classi dello spazio aereo e decodifica dei METAR: "Cosa significa squawk 7600?" "Cosa significa BKN in un METAR?" Il motore dei quiz (piano Team) gestisce le domande, il punteggio e una classifica per la tua scuola di volo virtuale, e l'istruttore spiega ogni risposta. Usalo come aiuto allo studio, non come sostituto dell'addestramento reale.

Esistono già componenti aggiuntivi di controllo del traffico aereo vocale guidato dall'IA per il simulatore; questa guida si concentra sul lato della cabina.

La parte Neocortex di un MSFS AI copilot

  • Dialogo. L'app legge lo stato del volo, lo invia a un personaggio Neocortex tramite /v3/chat, mostra la risposta come sottotitoli, riproduce la voce da /v3/audio/generate o /v3/audio/stream, ed esegue tramite SimConnect le azioni restituite dal personaggio.
  • Conversation Flow. I flow guidano le fasi del volo e restituiscono parole chiave di checkpoint a cui l'app reagisce.
  • Quiz. Il motore dei quiz esegue le domande di addestramento tramite /v3/quiz.
  • Comandi vocali. Neocortex Voice Commands gira sul PC del giocatore e trasforma le frasi pronunciate in azioni di cabina senza andata e ritorno verso il cloud.

I personaggi si costruiscono in un editor visuale a nodi con nodi di personalità, emozione, conoscenza, lingua e voce, in più di 20 lingue con accenti, quindi il tuo primo ufficiale può fare il briefing in francese o in spagnolo. Su piani Pro e Team fino a sei personaggi possono condividere una conversazione: il battibecco tra il comandante e il primo ufficiale e un membro dell'equipaggio di cabina. Per come Neocortex si confronta con altre piattaforme di personaggi IA, vedi la nostra pagina di confronto.

Cabine condivise e reti online

Segui i termini di licenza che accompagnano l'SDK di MSFS e le Regole per l'uso dei contenuti di Microsoft, e tieni gratuito un progetto non commerciale. Volaci da solo; nelle cabine condivise, nel multigiocatore o nelle reti ATC online, usalo solo dove le loro regole lo consentono. Ogni giocatore usa la propria chiave API Neocortex.

Inizia con un solo velivolo

  1. Installa l'SDK dalla Modalità sviluppatore del simulatore e costruisci un'app SimConnect di base in C# o C++.
  2. Progetta il primo ufficiale nella dashboard Neocortex, con le note del tuo velivolo come conoscenza, un flow per le fasi di volo e un insieme di domande di addestramento. Provalo nel browser.
  3. Progetta un insieme di comandi di cabina per carrello, flap, luci e pilota automatico, con alcune frasi di esempio per ogni azione.
  4. Collegati dall'app. Chiama /v3/chat fuori dal thread SimConnect, riusa il sessionId per tutto il volo, e associa le azioni restituite agli eventi chiave.
  5. Conserva la chiave API in un file di configurazione che il giocatore compila, mai scritta nel codice di un componente aggiuntivo condiviso.
  6. Prova offline su un velivolo predefinito con push-to-talk prima di passare ai velivoli aggiuntivi.

Un velivolo predefinito e la checklist di atterraggio bastano per un primo volo con un primo ufficiale Neocortex. Per il lato vocale in modo più approfondito, leggi comandi vocali sul dispositivo per le mod dei giochi. Preferisci la strada sulla strada? Vedi la nostra guida alla mod del co-pilota IA per Euro Truck Simulator 2 oppure l'indice completo delle mod con NPC IA e comandi vocali.

Versioni degli strumenti e link verificati a ottobre 2026. Gli strumenti per le mod cambiano spesso; controlla la pagina di ogni progetto per l'ultima versione.

Domande frequenti

Si può aggiungere un copilota IA a Microsoft Flight Simulator?

Sì. Un'app SimConnect esterna può leggere i dati di volo da MSFS 2020 o 2024, parlare con un personaggio IA e rimandare eventi di controllo al simulatore. Un primo ufficiale Neocortex può eseguire checklist, rispondere a domande e restituire azioni che la tua app esegue.

Posso controllare MSFS con comandi vocali?

Sì. SimConnect espone eventi chiave per carrello, flap, luci e pilota automatico, quindi qualsiasi app che trasforma il parlato in questi eventi ti dà il controllo vocale. Neocortex Voice Commands fa l'ascolto e il riconoscimento sul PC del giocatore, offline, e consegna alla tua app il comando.

Un MSFS AI copilot funziona sia in MSFS 2020 sia in 2024?

SimConnect è disponibile in entrambi i simulatori, e l'SDK di MSFS 2024 mantiene funzionanti i moduli costruiti per il 2020. Un'app copilota Neocortex può puntare a entrambi, con la parte IA che passa dalla stessa API web.

Un quiz da simulatore di volo può aiutare nell'addestramento dei piloti?

Un quiz su fraseologia, spazio aereo e decodifica dei METAR è un buon aiuto allo studio, anche se non sostituisce il vero addestramento di volo. Il motore dei quiz Neocortex (piano Team) gestisce le domande, il punteggio e una classifica, e un personaggio può spiegare ogni risposta.

Mi serve internet per i comandi vocali MSFS con Neocortex?

No. Neocortex Voice Commands gira sul PC del giocatore, quindi i comandi per carrello, flap e luci funzionano offline e rispondono all'istante. La conversazione del primo ufficiale IA usa l'API Neocortex.

Articoli simili

Continua a leggere