Neocortex Logo

Meta AI Building Blocks frente a Neocortex para NPC de VR

Los AI Building Blocks de Meta conectan proveedores de LLM, voz y TTS a Unity para Quest. Qué sigues montando tú y cómo cubre Neocortex los NPC de VR.

Neocortex TeamThe team behind Neocortex

· Actualizado el 20 oct 2026 · 6 min de lectura

Los AI Building Blocks de Meta conectan proveedores de LLM, voz y TTS a Unity para Quest. Qué sigues montando tú y cómo cubre Neocortex los NPC de VR.

Estás desarrollando para Meta Quest en Unity y quieres un personaje con el que el jugador pueda hablar. ¿Deberías empezar con los AI Building Blocks de Meta o con una plataforma de personajes?

Las herramientas de Meta son la primera parada obvia. El Meta XR SDK incluye AI Building Blocks para modelos de lenguaje, voz y síntesis de voz, y el veterano Voice SDK se encarga de los comandos de voz y el dictado. Son una fontanería útil. No son personajes. Esta comparación cubre lo que cada opción te da para un NPC de VR y lo que queda por hacer.

Qué ofrece Meta para IA en Quest

  • AI Building Blocks. Cuatro bloques: Object Detection, Large Language Models, Speech to Text y Text to Speech. Cada uno combina un componente de Unity con un proveedor que decide dónde se ejecuta la inferencia: en la nube, en una máquina local o en el propio casco. La documentación de Meta menciona proveedores como OpenAI, Ollama, Hugging Face, Replicate y ElevenLabs.
  • Requisitos. Unity 6 o posterior, un Quest 3 o 3S y conexión a internet para los proveedores en la nube. Los bloques que usan la cámara de paso también necesitan versiones recientes de Meta XR Core SDK y MR Utility Kit.
  • Voice SDK. Basado en Wit.ai, para comandos de voz, dictado y TTS.
  • Un backend de modelo que cambia. Meta ha retirado su vista previa de la Llama API, así que los proyectos que la usaban para el bloque de modelo de lenguaje necesitan otro proveedor.

Meta también advierte de que los modelos en la nube no siempre están disponibles en los servidores de un proveedor, así que compruebas la disponibilidad de proveedor y modelo antes de publicar.

Cuenta lo que aún tienes que construir

Los Building Blocks conectan modelos. Un personaje necesita más. Además de los bloques, tu equipo escribe y mantiene:

  • El personaje en sí. Personalidad, trasfondo, conocimientos, memoria y barreras, manteniéndose coherente durante una sesión de juego larga.
  • El pegamento entre bloques. La salida de voz a texto en el modelo de lenguaje, la respuesta en síntesis de voz, con gestión de interrupciones para que el jugador pueda cortar.
  • Cuentas de proveedor independientes. Cada bloque puede facturar a una empresa distinta, con sus propias claves, límites y cambios de precio.
  • Voces personalizadas a través de un servicio de voz de terceros.
  • Conciencia de escena y acciones. Decirle al personaje lo que el jugador sostiene o mira, y convertir una respuesta en algo que sucede en el mundo.
  • Todas las demás plataformas. Los Building Blocks apuntan a Quest en Unity. Una build de VR para PC, una versión para pantalla plana o un port a Unreal empieza desde cero.

Compara los AI Building Blocks de Meta y Neocortex

Meta AI Building BlocksNeocortex
Qué esConectores de proveedores para Unity en QuestPlataforma completa de personajes de IA
Diseño del personajeLo construyes túEditor visual de nodos, probado en el navegador
Modelo de lenguajeEliges y pagas a un proveedorGestionado por nosotros
VozConectas un proveedor de TTSTTS y STT en streaming, clonación y diseño de voz
Proveedores y facturaciónVarios, facturados por separadoUna cuenta, planes mensuales fijos
PlataformasQuest 3 y 3SUnity en escritorio, móvil y web, además de Unreal, Godot y Web API
Ganchos de juegoLos construyes túAcciones, objetos interactuables, emociones por línea
Estructura de historiaLa construyes túConversation Flows con checkpoints flowState

Recorre una tienda de realidad mixta

Imagina a una vendedora de pociones de pie sobre el escritorio real del jugador, en modo de paso de cámara.

Con Building Blocks, añades los bloques de voz a texto, de modelo de lenguaje y de texto a voz, eliges tres proveedores y los conectas entre sí. La personalidad de la vendedora vive en un prompt de sistema. Para que reaccione cuando el jugador coge un frasco, escribes código que describe la escena en texto, lo añade al prompt, analiza la respuesta en busca de la intención y dispara la animación. Su voz es un preajuste estándar, a menos que configures un servicio de voz aparte.

Con Neocortex, primero la construyes en el editor: un nodo Agent para el trasfondo, nodos Personality y Emotion para su carácter, un archivo Knowledge con la lista de precios y un nodo Objects que enumera los frascos. La pruebas en el navegador hasta que regatea como quieres. En Unity, tu juego le dice qué objeto etiquetado tiene el jugador en la mano. Ella responde con su propia voz clonada o diseñada, en streaming para que la respuesta empiece rápido, y la respuesta lleva una etiqueta de emoción para su cara y una acción con la forma de { "name": "OPEN_DOOR", "targetId": "door_02" } que tu código ejecuta, por ejemplo abrir el armario que hay detrás de ella. Si la misión necesita estructura, un Conversation Flow la lleva del saludo al regateo y a la receta secreta, y la API informa de cada checkpoint como flowState.

Puedes ver un personaje ejecutándose en un casco en nuestra demo de VR con el XR Interaction Toolkit de Unity.

Elige la opción adecuada para tu proyecto de Quest

Los Building Blocks encajan con un equipo que solo necesita una capacidad, como dictar texto en un campo o la detección de objetos para una función de realidad mixta, y que está dispuesto a gestionar las cuentas de los proveedores.

Neocortex encaja con un equipo que quiere personajes: diseñadores que editan la personalidad y los conocimientos sin reconstruir la app, voces propias para cada personaje, y NPC que actúan sobre la escena. También encaja con cualquier proyecto que pueda salir de Quest, porque el mismo personaje funciona en otras plataformas y motores.

Ambos pueden convivir en una misma app. Usa el Voice SDK para comandos de menú como «pausa» o «inventario», y un personaje de Neocortex para la conversación.

En cuanto a planes: los lanzamientos comerciales necesitan Pro (29 € al mes) o Team (99 € al mes), y Pro añade chat de grupo para hasta seis personajes a través de la API, lo que encaja con un grupo de compañeros en VR.

Pon un personaje en el casco

Empieza por el NPC que tus jugadores conocerán primero. Constrúyelo en el navegador, añade el SDK de Unity y escúchalo responder en el casco. Cada personaje posterior sigue los mismos pasos.

Los datos de Meta se revisaron por última vez en octubre de 2026.

Preguntas frecuentes

¿Qué son los AI Building Blocks de Meta?

Son componentes de Unity en el Meta XR SDK para detección de objetos, modelos de lenguaje, voz a texto y texto a voz, cada uno conectado al proveedor que elijas. Neocortex es una plataforma completa de personajes, con editor visual, voz y acciones de juego en un solo SDK de Unity.

¿Qué cascos admiten los AI Building Blocks de Meta?

Meta recomienda Unity 6 o posterior con un Quest 3 o Quest 3S. Los personajes de Neocortex funcionan en Unity para escritorio, móvil y web, y el mismo personaje también funciona en Unreal, Godot y a través de la Web API.

¿Sigue disponible la Meta Llama API para las apps de Quest?

No, Meta ha retirado su vista previa de la Llama API, así que el bloque de modelo de lenguaje necesita otro proveedor, como OpenAI u Ollama. Neocortex gestiona el modelo de lenguaje por ti, así que no hay proveedor que cambiar.

¿Puede un NPC de VR reaccionar a los objetos alrededor del jugador?

No de forma inmediata con los Building Blocks; esa integración la escribes tú. En Neocortex tu juego envía los objetos cercanos y los eventos recientes, y el personaje responde con acciones como abrir una puerta o entregar un objeto.

¿Puedo clonar una voz para un personaje de VR?

Con Building Blocks conectas un proveedor de TTS y gestionas las voces allí. Neocortex incluye clonación de voz a partir de una muestra corta de la que tengas derechos, y diseño de voz a partir de una descripción en texto: 5 voces personalizadas en Pro y 20 en Team.

Artículos similares

Sigue leyendo