Neocortex Logo

如何在 Unreal Engine 中制作 AI NPC | 2026 指南

2026 年如何在 Unreal Engine 中制作 AI NPC:自己编写 HTTP 调用、Neocortex 插件、NVIDIA ACE 本地插件和 Convai 插件,逐步讲解。

Sercan AltundasFounder of Neocortex

· 阅读约 9 分钟

2026 年如何在 Unreal Engine 中制作 AI NPC:自己编写 HTTP 调用、Neocortex 插件、NVIDIA ACE 本地插件和 Convai 插件,逐步讲解。

在 Unreal Engine 中制作 AI NPC,就是把关卡中的角色连接到语言模型上:可以通过你自己编写的 HTTP 调用,可以通过连接托管服务的角色插件,也可以通过在玩家 GPU 上运行模型的插件。Unreal Engine 本身没有对话式角色系统,所以每种方式都需要添加插件或编写 C++ 代码。

本指南面向使用 C++ 或 Blueprints 的 Unreal 开发者,他们希望角色能回答玩家输入或说出的内容。文中介绍四种方式:使用 Unreal 的 HTTP 模块自己调用、Neocortex 插件、NVIDIA ACE 的本地插件,以及 Convai 插件。每种方式都列出步骤、所需条件和成本。之后是对比表、适用于任何方式的建议,以及常见问题解答。

在 Unreal Engine 中制作 AI NPC 的 4 种方式

每种方式在关卡中都需要两样东西:代表角色的 Actor,以及让玩家发送文字或语音的途径。它们的区别在于模型运行在哪里、角色的个性写在哪里,以及你需要自己搭建多少底层部分。

方式一:用 HTTP 模块自己调用模型 API

Unreal 的 HTTP 模块是引擎自带的网络服务调用方式。FHttpModule::Get().CreateRequest() 会为当前平台创建一个请求。C++ 类可以把玩家的话发送给模型服务商,再把回复交给对话界面。本文以 OpenAI Responses API 为例;其他服务商的网址和请求体有所不同。

Unreal 还有用于在游戏中运行 ONNX 模型的神经网络引擎(NNE),但它标注为 Beta,其概述页也没有提到语言模型,所以它不是现成的会说话角色方案。

你需要: 一个 C++ 项目、一个模型服务商的 API 密钥,以及熟悉 C++ 和 JSON。

  1. 创建 API 密钥。 以 OpenAI 为例,在 platform.openai.com/api-keys 创建。
  2. 添加 HTTP 模块。 把 HTTP 模块加入游戏模块的依赖项,并在发起调用的类中包含 HttpModule.h。
  3. 把角色写成指令。 保存一个系统指令字符串,写明角色的身份、语气和限制。这个字符串就是角色的个性。
  4. 发送请求。 用 FHttpModule::Get().CreateRequest() 创建请求,把动词设为 POST,网址设为 https://api.openai.com/v1/responses,并设置 Authorization: Bearer <key> 和 Content-Type: application/json 请求头。请求体中放入模型名称、指令和玩家的消息。
  5. 处理回复。 绑定完成委托,解析 JSON,并把文本广播给一个 Blueprint 事件,方便设计师在控件中显示。
  6. 保存对话历史。 保存最近几轮对话,并在每次请求中一起发送;模型在两次调用之间没有自己的记忆。
  7. 补充其余部分。 语音输入输出、口型同步和游戏动作都是独立的系统,需要你自己构建或购买。
  8. 保护密钥。 发布前,让调用经过你自己的服务器,这样密钥就不会出现在打包的游戏里。

成本: Epic 不对 HTTP 模块收费。你需要按服务商的每 token 费率付费。

不足之处: 记忆、语音、动作、安全和服务器,全部要你自己负责。只会用 Blueprints 的团队需要程序员才能走这条路线。

方式二:Neocortex Unreal 插件

Neocortex 是我们自己的产品,阅读本节时请记住这一点。你在浏览器的可视化编辑器中设计角色,然后通过一个以源码形式发布的开源插件,从 Unreal 中与角色对话。它的组件可以在 C++ 和 Blueprints 中使用。Unreal Engine AI NPC 页面列出了所有功能。

你需要: Unreal Engine 5.0 或更高版本,一个 C++ 项目(纯 Blueprint 项目需要添加一个 C++ 类),一套 C++ 工具链(Windows 上用 Visual Studio,macOS 上用 Xcode),以及一个带 API 密钥的 Neocortex 账户。

  1. 创建角色。 在控制台中打开 Characters,点击 Create New Character,输入名称后点击 Create。在节点编辑器中,用背景、个性、知识、情绪和语音等节点来构建角色。
  2. 在浏览器中测试。 点击编辑器右上角的 Play。
  3. 创建 API 密钥。 在控制台中打开 API Keys。
  4. 安装插件。 从 https://github.com/neocortex-link/neocortex-unreal-sdk/releases/latest 下载 Source code (zip),解压到项目的 Plugins 文件夹,并把文件夹重命名为 Neocortex。或者在 Plugins 中运行 git clone https://github.com/neocortex-link/neocortex-unreal-sdk Neocortex。
  5. 重新编译并添加密钥。 打开项目,Unreal 询问是否重新编译时选择 Yes。打开 Tools > Neocortex,粘贴密钥,点击 Save 并刷新。
  6. 为角色添加 Smart Agent 组件。 选择角色,添加聊天控件(NeocortexChatUI),以及用于语音的 Microphone Recorder。
  7. 添加口型同步和动作。 Face Animator 会根据回复音频驱动 ARKit 风格的嘴部形态目标(morph target)。在编辑器中添加 Action 节点;当回复中提到某个动作时,你的 Blueprint 或 C++ 代码会执行它。用 Interactable 组件标记关卡中的物体,让角色知道它们的存在。
  8. 打开示例。 插件附带七个示例地图和一个启动器:Text Chat、Audio Chat、Actions、Interactables、Group Chat、Usage Gating 和 Quiz Show。

平台: Windows、macOS、Android 和 iOS。流式语音在 Windows、Linux 和 Android 上可用,其他平台会回退为完整音频片段。聊天面板支持阿拉伯语和希伯来语从右到左排版。

成本: Starter 每月 €9,Pro 每月 €29,Team 每月 €99(按年计费),或按月计费分别为 €11、€35 和 €119。商业用途需要 Pro 或 Team。参见价格。

不足之处: 角色运行在我们的云端,因此游戏需要联网。API 密钥保存在 Config/DefaultGame.ini 中,会随打包的游戏一起分发,所以请为密钥设置使用限制。群聊需要 Pro 或 Team,问答示例需要 Team。

开始使用

方式三:NVIDIA ACE 插件,在玩家的 GPU 上运行

NVIDIA ACE 是一组用于游戏角色的模型和 Unreal Engine 5 插件,包括语音识别、小型语言模型、文字转语音和 Audio2Face-3D 面部动画。NVIDIA 将这些 Unreal 插件描述为基于本地运行、针对 RTX 优化并附带即用模型的工作流,因此角色运行在玩家的 NVIDIA RTX 硬件上。

你需要: Unreal Engine 5.5、5.6 或 5.7(用于语音和语言插件;面部动画为 5.4 至 5.6),以及 NVIDIA GeForce RTX 硬件。

  1. 下载插件。 从 NVIDIA 的 ACE for Games 页面,为你需要的每个部分(语音识别、语言模型、文字转语音、面部动画)下载插件,并与你的引擎版本相匹配。
  2. 复制到项目中。 如果项目中没有 Plugins 文件夹,就新建一个,然后把插件复制进去。NVIDIA 的指南建议只安装到引擎或项目中的一处,不要两处都装。
  3. 启用插件。 在编辑器中打开 Edit > Plugins,搜索 NVIDIA ACE,勾选插件,并在提示时重启。
  4. 从示例开始。 插件附带 Blueprint 示例,文字转语音插件还包括示例声音和一个示例关卡。
  5. 串联各部分。 语音识别把玩家的声音转为文字,语言模型(内置的 Qwen 3.5 4B 模型,或你自己的 GGUF 模型)生成回复,文字转语音把回复读出,Audio2Face-3D 驱动面部动画。
  6. 用函数调用实现动作。 语言模型插件支持函数调用,角色可以请求一个游戏函数,再由你的代码执行。

成本: NVIDIA 没有公布价格。Unreal 插件采用 MIT 许可证;Audio2Face-3D 的权重采用 NVIDIA 开放模型许可证。

不足之处: 它取决于玩家的 GPU,没有合适 NVIDIA RTX 硬件的玩家需要另一条路线。角色的个性写在你的提示词和 Blueprints 中,没有单独的角色编辑器。在决定之前,请先阅读我们的 NVIDIA ACE 系统要求一文。

方式四:Convai Unreal Engine 插件

Convai 是一个托管的对话式角色平台,并提供自己的 Unreal 插件。你在 Convai 的控制台中创建角色,再通过组件把它连接到项目中。

你需要: Convai 账户和 API 密钥。Convai 的兼容性页面列出 Win64 或 Android 作为构建目标;我们阅读时,它的最低引擎版本没有显示。

  1. 安装插件。 从 Fab 或 Convai 的 GitHub 发布页获取,并在项目中启用。
  2. 登录。 打开 Convai 编辑器窗口,登录并保存你的 API 密钥。
  3. 了解组件。 Convai Chatbot 放在角色上,Convai Player 放在玩家身上,Convai Object 放在角色应当了解的物体上,Face Sync 用于面部。
  4. 放置角色。 把 Convai 角色添加到关卡中,并与它进行一次语音对话,检查设置是否正确。
  5. 连接骨骼。 可选地,把 Convai 的口型同步和动画连接到 MetaHuman 角色上。

成本: 免费版 $0,每月 100 次互动;Indie Dev 每月 $29(按年计费 $22);Professional $99($69);Scale $499($299);Business $1,199($499);Enterprise 需咨询(数据读取于 2026 年 11 月)。

不足之处: 套餐按互动次数计费,因此随着玩家数量增长,要规划好用量。详细对比请参阅我们的 Convai 替代方案一文。

四种方式对比

因素自己调用 HTTPNeocortex 插件NVIDIA ACE 插件Convai 插件
角色在哪里定义C++ 中的字符串浏览器中的可视化节点编辑器你的提示词和 BlueprintsConvai 控制台
模型在哪里运行服务商的云端Neocortex 云端玩家的 RTX GPUConvai 云端
引擎版本任何带 HTTP 模块的版本5.0 或更高5.5 至 5.7(面部为 5.4 至 5.6)页面未显示
Blueprints只有你开放出来的部分支持,另加 C++支持,另加 C++支持
语音和口型同步自己构建已包含已包含已包含
起始成本服务商的 token 费率每月 €9 起未公布价格每月 100 次互动免费($0)
所需技能C++、HTTP、服务器C++ 项目,然后用 Blueprints插件设置、GPU 规划插件设置

自己调用可以获得最大的控制权,但需要自己搭建的内容也最多。NVIDIA ACE 是没有云端参与的路线,依赖玩家的硬件。Neocortex 和 Convai 把角色保存在托管编辑器中,并加入语音和口型同步;它们的区别在于计费方式和列出的平台。

让 Unreal Engine 效果更好的建议

这些习惯适用于任何方式。

  1. 把每个已发布的密钥都当作公开信息。 配置文件或二进制文件中的密钥可以被找到。请在服务商前面加一层服务器,或者为密钥设置按玩家和按角色的使用限制。
  2. 让模型提出请求,由游戏做决定。 无论是通过动作还是函数调用,都要保留一份角色可以执行的固定清单,并在请求改变游戏之前,在 C++ 或 Blueprints 中逐项检查。
  3. 尽量使用流式音频。 玩家对沉默的敏感程度超过对文字慢的敏感程度。收到第一段音频时就开始播放语音,而不是等整段音频加载完。
  4. 让面部与骨骼匹配。 口型同步系统需要特定的嘴型集合(常见的是 ARKit 风格的 blend shape)。在选择方案之前,先检查角色的 morph target。
  5. 写好剧情节点,让 AI 生成闲聊。 关键任务台词保持预先编写,AI 角色只负责它们周围的对话,这样任何问题都无法绕过剧情。

为 Unreal Engine 选择合适的方式

自己调用 HTTP 适合有 C++ 程序员、有后端,并且需要控制每一次请求和模型选择的团队。

Neocortex 插件 适合希望设计师在浏览器编辑器中构建和测试角色,再把它们放进 C++ 或 Blueprint 项目,并在 Windows、macOS、Android 或 iOS 上发布的团队。

NVIDIA ACE 适合面向 NVIDIA RTX 玩家的 PC 游戏,这类游戏更看重本地语音、回复和面部动画,而不是覆盖所有机器。

Convai 插件 适合想要托管平台、需要 MetaHuman 设置指南,并且玩家数量符合其套餐的团队。

更多选择请参阅适用于 Unreal Engine 的最佳 AI NPC 工具,引擎费用请参阅 Unreal Engine 定价。

常见问题

我能只用 Blueprints 在 Unreal Engine 中制作 AI NPC 吗?

可以,前提是使用提供 Blueprint 节点的插件,例如 NVIDIA ACE 或 Convai。Neocortex 插件也可以在 Blueprints 中使用,但它需要 C++ 项目才能编译,纯 Blueprint 项目只需添加一个 C++ 类即可。

Unreal Engine 有内置的 AI NPC 吗?

没有。Unreal 提供用于网络调用的 HTTP 模块,以及用于运行神经网络模型的 NNE(Beta),但没有对话式角色系统。我们的 Unreal Engine AI 文章介绍了引擎自带的 AI 功能。

Unreal 中的 AI NPC 能离线运行吗?

可以,在支持的 RTX 硬件上使用 NVIDIA ACE 的本地插件即可。云端方案,包括 Neocortex 和 Convai,都需要联网。

AI NPC 能与 MetaHuman 配合使用吗?

可以。Convai 记载了 MetaHuman 的设置方法,Neocortex 的 Face Animator 可以驱动 ARKit 风格的 morph target。请检查你的骨骼是否具备插件所需的嘴型。

在 Unreal 游戏中添加 AI NPC 要花多少钱?

Neocortex 和 NVIDIA ACE 插件下载免费。运行成本取决于方式:自己调用按 token 费率计费,Neocortex 或 Convai 按月套餐计费,NVIDIA ACE 则取决于玩家的硬件。

相关文章

继续阅读