Neocortex Logo

通过 Unity 接入 Meta Quest

为 Meta Quest 打造的 AI NPC

玩家直接和角色交谈,而不是用手柄选台词。在浏览器中设计角色,再用 Neocortex Unity SDK 把它带进你的 Unity XR 项目。模型运行在 Neocortex 服务器上,而不是头显里。

  • 免费方案
  • 无需信用卡
  • Unity、Unreal、Godot、Web SDK 和 Web API
Neocortex 的 AI 角色 Cora 正在挥手打招呼
  • 5

    种接入方式

    Unity、Unreal、Godot、Web SDK、Web API

  • 20+

    种语言

    每个角色单独设置

  • 10 秒

    克隆一个声音

    也可以用文字描述设计声音

  • €0

    即可开始

    免费方案,编辑器内测试免费

获得行业领先企业支持

CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants
CDG Booster ProgramTehnopol AI AcceleratorNvidia Inception ProgramMicrosoft Partner | Microsoft for StartupsAWS Partner | AWS StartupsCloudflare Startup ProgramFal AI Startup ProgramElevenLabs Grants

快速上手

从零开始,在 Meta Quest 里做出会说话的角色

  1. 1

    设计你的角色

    在可视化编辑器中搭建个性、知识、声音和动作,并在浏览器里测试。

  2. 2

    安装 Unity SDK

    在你的 XR 项目中打开 Package Manager,选择 Add package from git URL,然后粘贴:

    https://github.com/neocortex-link/neocortex-unity-sdk.git
  3. 3

    放进头显

    在 Tools > Neocortex > Settings 中粘贴 API 密钥,给角色添加 Smart Agent、Audio Source 和 Audio Receiver,选中你的角色,然后构建到 Quest。

环境要求

  • Unity 6(6000.0)或更高版本,使用 Android 构建目标
  • XR 环境,例如 XR Interaction Toolkit
  • 免费的 Neocortex 账号和 API 密钥
阅读 Meta Quest 文档

你能得到什么

为 Meta Quest 开发者打造

01

免手持语音

默认使用语音检测,也可以用手柄按键实现按键说话,Android 麦克风权限已处理好。

02

头显负担轻

Quest 只负责录下玩家的声音并播放回复。角色的模型运行在 Neocortex 服务器上。

03

开源 VR 演示

GitHub 上一个基于 XR Interaction Toolkit 搭建的场景,带有语音聊天和可移动的聊天面板。

04

可以操作的物体

把物体标记为 Interactable,角色就能谈论它们,并用动作指向它们。

05

口型同步与情绪

Face Animator 会在角色说话时驱动嘴部,每句台词都带有可用于表情的情绪。

06

同一个角色,处处可用

你打造的角色同样能用在 Unreal、Godot 和 Web 上。

07

语音更快开始

声音一到,角色就开口,不必等整段音频。

08

记住玩家

SDK 按角色保存会话,下次戴上头显时,NPC 会接着上次的对话继续。

09

同时多个 NPC

NeocortexGroupDirector 把多个角色放进同一场对话,并决定由谁回答,需要 Pro 或 Team 方案。

工作原理

用设计打造角色,而不是没完没了地改提示词

  • 个性、情绪、知识和世界都是可以连接的节点,不用一遍遍重写提示词。
  • 意图和动作把玩家说的话,变成游戏里真正发生的事。
  • 每个角色进入引擎之前,都能先在浏览器里免费测试。
neocortex.link/dashboard/characters
Neocortex 可视化角色编辑器:情绪、个性、知识、语言和声音节点连接到世界中的智能体,意图映射到游戏内动作

听听客户怎么说

看看创作者们如何评价使用Neocortex进行开发。

在试用了多家智能NPC服务商之后,我在为我们的虚拟教育平台寻找能够保持对话状态的AI时发现了Neocortex。Neocortex脱颖而出,在我们所有关键考量上都名列前茅。

Vallikat Peethamber
总经理

Neocortex为我们的VR平台带来了可扩展的解决方案,让我们能够打造更具沉浸感的培训场景。让AI智能体在明确的边界内运行并不容易,但Neocortex处理得非常好,定制也很方便。

Ottó Farkas
IT专家 / 项目经理

在课堂实践中,Neocortex及其基于动作的机制为学生提供了一种开箱即用的方式,将对话智能体融入基于软件和硬件的交互设计流程。

Hongming Li
讲师 / 培训师

我在做毕业设计时发现了Neocortex,平台易于集成、上手简单,让我顺利地在应用中实现了智能NPC。强烈推荐!

Angela Pellillo
后端开发者

Neocortex是我将基于LLM的NPC引入真实Unity3D原型的第一步,不仅加快了开发进度,还让我的TikTok账号在一个月内从0涨到了4000名粉丝!

Brandan Chen
助理游戏制作人

在试用了多家智能NPC服务商之后,我在为我们的虚拟教育平台寻找能够保持对话状态的AI时发现了Neocortex。Neocortex脱颖而出,在我们所有关键考量上都名列前茅。

Vallikat Peethamber
总经理

Neocortex为我们的VR平台带来了可扩展的解决方案,让我们能够打造更具沉浸感的培训场景。让AI智能体在明确的边界内运行并不容易,但Neocortex处理得非常好,定制也很方便。

Ottó Farkas
IT专家 / 项目经理

在课堂实践中,Neocortex及其基于动作的机制为学生提供了一种开箱即用的方式,将对话智能体融入基于软件和硬件的交互设计流程。

Hongming Li
讲师 / 培训师

我在做毕业设计时发现了Neocortex,平台易于集成、上手简单,让我顺利地在应用中实现了智能NPC。强烈推荐!

Angela Pellillo
后端开发者

Neocortex是我将基于LLM的NPC引入真实Unity3D原型的第一步,不仅加快了开发进度,还让我的TikTok账号在一个月内从0涨到了4000名粉丝!

Brandan Chen
助理游戏制作人

一个周末,从创意到可玩的角色

Game Jam 团队用 Neocortex,在一个周末内就把会说话、会行动的 AI 角色放进了可玩的游戏。

阅读一个 Game Jam 故事

常见问题

在 Meta Quest 中使用 Neocortex:常见问题

有专门的 Meta Quest 版 Neocortex SDK 吗?

没有单独的 SDK。Meta Quest 应用在 Unity XR 项目中使用 Neocortex Unity SDK,例如搭配 XR Interaction Toolkit。

能在头显上离线运行吗?

不能。角色运行在 Neocortex 服务器上,因此头显需要联网。工作室也可以在自己的基础设施上运行 Neocortex 平台。

有可以直接上手的 VR 演示吗?

有。我们在 GitHub 上的开源 VR 演示把 Neocortex Unity SDK 与 XR Interaction Toolkit 结合,实现与 NPC 的语音聊天。

玩家不按按钮也能说话吗?

能。Audio Receiver 默认使用语音检测来监听。如果玩家更喜欢按住扳机键说话,可以切换到按键说话。

能在 VR 中办一场问答节目吗?

能。Unity SDK 的 NeocortexQuizAgent 和 SDK 的其他部分一样可以在 Meta Quest 上运行,所以角色可以根据你在控制台中编写的题库,在头显里用语音主持问答。问答功能需要 Team 方案。

能限制每位玩家的用量吗?

能。Unity SDK 会把每台设备的 id 作为玩家 id 发送,因此在控制台中设置的按玩家积分上限会按头显生效。NeocortexUsageGate 会在发送消息前检查这些上限。

角色能用自定义声音说话吗?

能。角色可以使用基础声音、克隆声音或设计的声音,在编辑器中设置,在头显中以同样方式使用。克隆声音需要 Pro 或 Team 方案。

在比较工具?

面向 Meta Quest 团队:Neocortex 与同类工具对比

在 VR 里和你的 NPC 对话

免费方案,无需信用卡。在浏览器里创建角色,几分钟后就能和它对话。