Neocortex Logo

Meta Quest via Unity

NPCs com IA para Meta Quest

Os jogadores conversam com os personagens em vez de escolher falas com o controle. Crie o personagem no navegador e leve-o para o seu projeto Unity XR com o SDK do Neocortex para Unity. O modelo roda nos servidores do Neocortex, não no headset.

  • Plano gratuito
  • Sem cartão de crédito
  • Unity, Unreal, Godot, Web SDK e Web API
Cora, a personagem de IA do Neocortex, acenando
  • 5

    formas de integrar

    Unity, Unreal, Godot, Web SDK, Web API

  • 20+

    idiomas

    definidos por personagem

  • 10 s

    para clonar uma voz

    ou criar uma a partir de texto

  • 0 €

    para começar

    plano gratuito e testes no editor

Com o apoio de líderes do setor

CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants
CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants

Primeiros passos

Do zero a um personagem falante em Meta Quest

  1. 1

    Crie seu personagem

    Monte personalidade, conhecimento, voz e ações no editor visual e teste tudo no navegador.

  2. 2

    Instale o SDK para Unity

    No seu projeto XR, abra o Package Manager, escolha Add package from git URL e cole:

    https://github.com/neocortex-link/neocortex-unity-sdk.git
  3. 3

    Coloque no headset

    Cole sua chave de API em Tools > Neocortex > Settings, adicione um Smart Agent, um Audio Source e um Audio Receiver ao personagem, escolha qual ele é e gere a build para o Quest.

Requisitos

  • Unity 6 (6000.0) ou mais recente com o alvo de build Android
  • Uma configuração de XR, como o XR Interaction Toolkit
  • Uma conta gratuita no Neocortex e uma chave de API
Leia a documentação de Meta Quest

O que você recebe

Feito para quem desenvolve em Meta Quest

01

Voz sem as mãos

Detecção de voz por padrão, ou push-to-talk em um botão do controle, com a permissão de microfone do Android já resolvida.

02

Leve para o headset

O Quest grava o jogador e reproduz a resposta. O modelo do personagem roda nos servidores do Neocortex.

03

Demo de VR de código aberto

Uma cena no GitHub feita com o XR Interaction Toolkit, com chat por voz e um painel de chat que você pode mover.

04

Objetos com que ele pode agir

Marque objetos como Interactable, e o personagem pode falar sobre eles e mirá-los com ações.

05

Lip sync e emoção

O Face Animator move a boca enquanto o personagem fala, e cada fala traz uma emoção para as expressões.

06

O mesmo personagem em todo lugar

O personagem que você cria também funciona em Unreal, Godot e na web.

07

A voz começa antes

Os personagens começam a falar assim que a voz chega, sem esperar o clipe inteiro.

08

Lembra do jogador

O SDK salva uma sessão por personagem, então o NPC retoma a conversa na próxima vez que o headset for colocado.

09

Vários NPCs ao mesmo tempo

O NeocortexGroupDirector coloca vários personagens em uma só conversa e decide quem responde, em um plano Pro ou Team.

Como funciona

Personagens que você projeta, não prompts que você vive vigiando

  • Personalidade, emoção, conhecimento e mundo são nós que você conecta, não prompts que você reescreve.
  • Intenções e ações transformam o que o jogador fala em algo que acontece no seu jogo.
  • Teste cada personagem de graça no navegador antes de levá-lo para a sua engine.
neocortex.link/dashboard/characters
Editor visual de personagens do Neocortex: nós de emoção, personalidade, conhecimento, idioma e voz conectados a um agente em um mundo, com intenções ligadas a ações no jogo

O que nossos clientes dizem

Veja o que os criadores falam sobre desenvolver com o Neocortex.

Depois de testar vários fornecedores de NPCs inteligentes, encontrei o Neocortex procurando uma IA conversacional que mantivesse o estado da conversa para nossa plataforma de educação virtual. O Neocortex se destacou e superou todos os nossos critérios principais.

Vallikat Peethamber
Diretor-geral

O Neocortex abriu soluções escaláveis para nossa plataforma de VR e nos permitiu criar cenários que tornam o treinamento muito mais imersivo. Manter agentes de IA dentro de limites claros é difícil, mas o Neocortex faz isso muito bem e facilita a personalização.

Ottó Farkas
Especialista em TI / Gerente de projetos

Em sala de aula, o Neocortex e seu mecanismo baseado em ações oferecem aos alunos uma forma pronta para usar de conectar agentes conversacionais a fluxos de design de interação baseados em software e hardware.

Hongming Li
Professor / Instrutor

Conheci o Neocortex enquanto fazia meu trabalho de conclusão de curso, e a facilidade de integração da plataforma me permitiu colocar NPCs inteligentes no meu aplicativo sem dificuldade. Recomendo muito!

Angela Pellillo
Desenvolvedor backend

O Neocortex foi o primeiro passo para levar NPCs com LLM a um protótipo real em Unity3D: acelerou o desenvolvimento e fez minha conta no TikTok ir de 0 a 4000 seguidores em um mês!

Brandan Chen
Produtor de jogos associado

Depois de testar vários fornecedores de NPCs inteligentes, encontrei o Neocortex procurando uma IA conversacional que mantivesse o estado da conversa para nossa plataforma de educação virtual. O Neocortex se destacou e superou todos os nossos critérios principais.

Vallikat Peethamber
Diretor-geral

O Neocortex abriu soluções escaláveis para nossa plataforma de VR e nos permitiu criar cenários que tornam o treinamento muito mais imersivo. Manter agentes de IA dentro de limites claros é difícil, mas o Neocortex faz isso muito bem e facilita a personalização.

Ottó Farkas
Especialista em TI / Gerente de projetos

Em sala de aula, o Neocortex e seu mecanismo baseado em ações oferecem aos alunos uma forma pronta para usar de conectar agentes conversacionais a fluxos de design de interação baseados em software e hardware.

Hongming Li
Professor / Instrutor

Conheci o Neocortex enquanto fazia meu trabalho de conclusão de curso, e a facilidade de integração da plataforma me permitiu colocar NPCs inteligentes no meu aplicativo sem dificuldade. Recomendo muito!

Angela Pellillo
Desenvolvedor backend

O Neocortex foi o primeiro passo para levar NPCs com LLM a um protótipo real em Unity3D: acelerou o desenvolvimento e fez minha conta no TikTok ir de 0 a 4000 seguidores em um mês!

Brandan Chen
Produtor de jogos associado

Da ideia a um personagem jogável em um fim de semana

Equipes de game jam usam o Neocortex para colocar personagens de IA que falam e agem em jogos jogáveis em um único fim de semana.

Leia a história de uma game jam

Perguntas frequentes

Neocortex para Meta Quest: perguntas frequentes

Existe um SDK do Neocortex para Meta Quest?

Não um separado. Apps para Meta Quest usam o SDK do Neocortex para Unity em um projeto Unity XR, por exemplo com o XR Interaction Toolkit.

Funciona offline no headset?

Não. Os personagens rodam nos servidores do Neocortex, então o headset precisa de conexão com a internet. Estúdios também podem rodar a plataforma Neocortex na própria infraestrutura.

Existe uma demo de VR para começar?

Sim. Nossa demo de VR de código aberto no GitHub combina o SDK do Neocortex para Unity com o XR Interaction Toolkit para chat por voz com um NPC.

Os jogadores podem falar sem apertar um botão?

Sim. O Audio Receiver escuta com detecção de voz por padrão. Troque para push-to-talk se os jogadores preferirem segurar um gatilho.

Posso fazer um game show de perguntas em VR?

Sim. O NeocortexQuizAgent do SDK para Unity roda no Meta Quest como o resto do SDK, então um personagem pode apresentar um quiz falado no headset a partir de um conjunto de perguntas que você escreve no painel. Os quizzes exigem o plano Team.

Posso limitar quanto cada jogador usa?

Sim. O SDK para Unity envia o id de cada dispositivo como id do jogador, então os limites de crédito por jogador definidos no painel valem por headset. O NeocortexUsageGate verifica esses limites antes de uma mensagem ser enviada.

O personagem pode falar com uma voz personalizada?

Sim. Um personagem pode falar com uma voz básica, clonada ou criada por descrição, definida no editor e usada do mesmo jeito no headset. Vozes clonadas exigem um plano Pro ou Team.

Comparando ferramentas?

Como o Neocortex se compara para equipes de Meta Quest

Converse com seu NPC em VR

Plano gratuito, sem cartão de crédito. Crie um personagem no navegador e converse com ele em poucos minutos.