Meta Quest AI Building Blocks ou Neocortex pour les NPC en VR
Les AI Building Blocks de Meta relient des fournisseurs de LLM, de parole et de synthèse vocale à Unity pour Quest. Ce qu'il reste à assembler vous-même, et comment Neocortex couvre les NPC en VR.
Neocortex TeamThe team behind Neocortex
· Mis à jour le 20 oct. 2026 · 6 min de lecture

Vous développez pour Meta Quest dans Unity et vous voulez un personnage avec lequel le joueur peut parler. Faut-il commencer par les AI Building Blocks de Meta, ou par une plateforme de personnages ?
Les outils de Meta sont l'étape évidente pour commencer. Le Meta XR SDK inclut les AI Building Blocks pour les modèles de langage, la parole et la synthèse vocale, et le Voice SDK, de longue date, gère les commandes vocales et la dictée. Ce sont des briques utiles. Ce ne sont pas des personnages. Cette comparaison montre ce que chaque solution vous apporte pour un NPC en VR, et ce qui reste à faire.
Ce que Meta fournit pour l'IA sur Quest
- AI Building Blocks. Quatre blocs : Object Detection, Large Language Models, Speech to Text et Text to Speech. Chacun associe un composant Unity à un fournisseur qui décide où s'exécute l'inférence : dans le cloud, sur une machine locale ou sur le casque. La documentation de Meta cite des fournisseurs comme OpenAI, Ollama, Hugging Face, Replicate et ElevenLabs.
- Configuration requise. Unity 6 ou plus récent, un Quest 3 ou 3S, et une connexion Internet pour les fournisseurs cloud. Les blocs qui utilisent la caméra de passthrough demandent aussi des versions récentes du Meta XR Core SDK et de MR Utility Kit.
- Voice SDK. Basé sur Wit.ai, pour les commandes vocales, la dictée et la synthèse vocale.
- Un backend de modèle qui change. Meta a retiré son aperçu de Llama API, donc les projets qui l'utilisaient pour le bloc de modèle de langage ont besoin d'un autre fournisseur.
Meta prévient aussi que les modèles cloud ne sont pas toujours disponibles sur les serveurs d'un fournisseur, donc vérifiez la disponibilité du fournisseur et du modèle avant de livrer.
Ce qu'il reste à construire
Les Building Blocks connectent des modèles. Un personnage demande davantage. En plus des blocs, votre équipe écrit et maintient :
- Le personnage lui-même. Persona, passé, connaissances, mémoire et garde-fous, cohérents sur une longue session de jeu.
- La colle entre les blocs. La sortie de la reconnaissance vocale vers le modèle de langage, la réponse vers la synthèse vocale, avec la gestion des interruptions pour que le joueur puisse couper la parole.
- Des comptes fournisseurs séparés. Chaque bloc peut être facturé par une entreprise différente, avec ses propres clés, limites et changements de prix.
- Des voix personnalisées via un service vocal tiers.
- La conscience de la scène et les actions. Indiquer au personnage ce que le joueur tient ou regarde, et transformer une réponse en quelque chose qui se produit dans le monde.
- Toutes les autres plateformes. Les Building Blocks ciblent Quest dans Unity. Une version PC VR, une version sur écran plat ou un portage Unreal repart de zéro.
Comparer Meta AI Building Blocks et Neocortex
| Meta AI Building Blocks | Neocortex | |
|---|---|---|
| Ce que c'est | Connecteurs de fournisseurs pour Unity sur Quest | Plateforme complète de personnages IA |
| Conception du personnage | À construire vous-même | Éditeur de nœuds visuel, testé dans le navigateur |
| Modèle de langage | Vous choisissez et payez un fournisseur | Géré pour vous |
| Voix | Connecter un fournisseur TTS | TTS et STT en flux, clonage et création de voix |
| Fournisseurs et facturation | Plusieurs, facturés séparément | Un seul compte, offres mensuelles fixes |
| Plateformes | Quest 3 et 3S | Unity sur bureau, mobile et web, plus Unreal, Godot et Web API |
| Points d'accroche du gameplay | À construire vous-même | Actions, objets interactifs, émotions par réplique |
| Structure narrative | À construire vous-même | Conversation Flows avec des points de contrôle flowState |
Parcourir un marchand en réalité mixte
Imaginez un vendeur de potions debout sur le bureau réel du joueur, en passthrough.
Avec les Building Blocks, vous ajoutez les blocs de reconnaissance vocale, de modèle de langage et de synthèse vocale, choisissez trois fournisseurs et les reliez entre eux. La personnalité de la marchande vit dans un prompt système. Pour qu'elle réagisse quand le joueur prend une fiole, vous écrivez du code qui décrit la scène en texte, l'ajoute au prompt, analyse la réponse pour en extraire l'intention et déclenche l'animation. Sa voix est un préréglage standard, sauf si vous mettez en place un service vocal séparé.
Avec Neocortex, vous la construisez d'abord dans l'éditeur : un nœud Agent pour son passé, des nœuds Personality et Emotion pour son caractère, un fichier Knowledge avec la liste des prix, et un nœud Objects qui répertorie les fioles. Vous la testez dans le navigateur jusqu'à ce qu'elle marchande comme vous le souhaitez.
Dans Unity, votre jeu lui indique quel objet balisé le joueur tient. Elle répond avec sa propre voix clonée ou créée, diffusée en flux pour que la réponse démarre vite, et la réponse porte une balise d'émotion pour son visage ainsi qu'une action sous la forme { "name": "OPEN_DOOR", "targetId": "door_02" } que votre code exécute, par exemple en ouvrant l'armoire derrière elle.
Si la quête demande une structure, un Conversation Flow la fait passer de l'accueil au marchandage, puis à la recette secrète, et l'API signale chaque point de contrôle sous la forme de flowState.
Vous pouvez voir un personnage tourner dans un casque dans notre démo VR avec le XR Interaction Toolkit d'Unity.
Choisir la solution adaptée à votre projet Quest
Les Building Blocks conviennent à une équipe qui n'a besoin que d'une seule capacité, comme la dictée dans un champ de texte ou la détection d'objets pour une fonction en réalité mixte, et qui est prête à gérer ses propres comptes fournisseurs.
Neocortex convient à une équipe qui veut des personnages : des designers qui modifient la personnalité et les connaissances sans reconstruire l'application, des voix propres à chaque personnage, et des NPC qui agissent sur la scène. Il convient aussi à tout projet qui pourrait quitter Quest, car le même personnage tourne sur d'autres plateformes et moteurs.
Les deux peuvent cohabiter dans une même application. Utilisez le Voice SDK pour les commandes de menu comme « pause » ou « inventaire », et un personnage Neocortex pour la conversation.
Côté offres : les sorties commerciales demandent Pro (EUR 29 par mois) ou Team (EUR 99 par mois), et Pro ajoute le chat de groupe pour jusqu'à six personnages via l'API, ce qui convient à un groupe de compagnons en VR.
Mettre un personnage dans le casque
Commencez par le NPC que vos joueurs rencontreront en premier. Construisez-le dans le navigateur, ajoutez le SDK Unity, et entendez-le répondre dans le casque. Chaque personnage suivant suit les mêmes étapes.
Les informations sur Meta ont été vérifiées pour la dernière fois en octobre 2026.
Questions fréquentes
Que sont les AI Building Blocks de Meta ?
Ce sont des composants Unity du Meta XR SDK pour la détection d'objets, les modèles de langage, la reconnaissance vocale et la synthèse vocale, chacun relié à un fournisseur de votre choix. Neocortex est au contraire une plateforme complète de personnages, avec un éditeur visuel, la voix et les actions de gameplay dans un seul SDK Unity.
Quels casques prennent en charge les AI Building Blocks de Meta ?
Meta recommande Unity 6 ou plus récent avec un Quest 3 ou Quest 3S. Les personnages Neocortex tournent dans Unity sur bureau, mobile et web, et le même personnage fonctionne aussi dans Unreal, Godot et via la Web API.
La Llama API de Meta est-elle encore disponible pour les applications Quest ?
Non, Meta a retiré son aperçu de Llama API, donc le bloc de modèle de langage a besoin d'un autre fournisseur comme OpenAI ou Ollama. Neocortex gère le modèle de langage pour vous, il n'y a donc aucun fournisseur à remplacer.
Un NPC en VR peut-il réagir aux objets autour du joueur ?
Pas d'emblée avec les Building Blocks ; c'est une intégration que vous écrivez vous-même. Dans Neocortex, votre jeu envoie les objets proches et les événements récents, et le personnage répond avec des actions comme ouvrir une porte ou remettre un objet.
Puis-je cloner une voix pour un personnage VR ?
Avec les Building Blocks, vous connectez un fournisseur TTS et gérez les voix chez lui. Neocortex inclut le clonage de voix à partir d'un court échantillon sur lequel vous avez des droits, et la création de voix à partir d'une description écrite : 5 voix personnalisées sur Pro et 20 sur Team.






