Neocortex Logo

Unity Sentis 与 Neocortex:AI NPC 怎么选

Unity Sentis 在设备端运行神经网络,但它不是 AI 角色系统。在 Sentis 上做一个 NPC 需要什么,以及什么时候 Neocortex 更快。

Neocortex TeamThe team behind Neocortex

· 更新于 2026年10月20日 · 阅读约 5 分钟

Unity Sentis 在设备端运行神经网络,但它不是 AI 角色系统。在 Sentis 上做一个 NPC 需要什么,以及什么时候 Neocortex 更快。

简短回答: Unity Sentis 在你的游戏内部运行神经网络。它是构建 AI NPC 的基础模块,而不是角色系统。如果你希望本周就做出一个会说话的 NPC,Neocortex 为你提供角色、声音和 Unity SDK。如果你需要自定义的设备端模型,Sentis 才是合适的工具,两者也可以配合使用。

搜索“Unity 中的 AI”时,Sentis 很快就会出现,因此很自然会问:做 AI NPC 是否只需要它。下面说明 Sentis 能做什么,在它上面构建一个角色需要哪些工作,以及 Neocortex 处于什么位置。

Unity Sentis 简介

Sentis 是 Unity 的一个库,用于在玩家的设备上运行训练好的模型,可使用 CPU 或 GPU,覆盖所有 Unity 运行时平台。

  • 导入 ONNX 模型、LiteRT(前身为 TensorFlow Lite)模型,以及 PyTorch 导出的程序。
  • 为文本分词,适用于语言模型,分词器可读取大多数 Hugging Face 模型仓库中的 tokenizer.json 文件。
  • 曾用过两个名字。 在几个版本中,该包显示为 Inference Engine。从 2.4 版本起,显示名称又改回 Sentis,包 ID 仍为 com.unity.ai.inference。

Sentis 面向自定义的设备端模型:视觉、姿态估计、分类器和小型生成模型。 Unity 没有基于它构建的对话角色功能。Unity AI 是 Muse 的继任者,是帮助你构建游戏的编辑器助手,而不是运行时角色系统。

在 Sentis 上做一个会说话的 NPC 需要什么

以下是为一个玩家可以与之对话的 NPC 所需的工作,按顺序排列。

  1. 选择一个语言模型,它要小到能在你最弱的目标设备上以帧率运行,同时又要足够好,能够保持角色设定。
  2. 转换并验证。 导出为支持的格式,检查每个算子是否受支持,并在量化后测试输出质量。
  3. 设置分词和生成循环:采样、停止条件,以及把 token 流式输出到界面中而不卡住游戏。
  4. 编写角色。 人设、背景故事、知识和约束都写入提示词中,并且在对话超出模型上下文长度时,由你来管理记忆。
  5. 添加语音转文字和文字转语音,这又是两个需要找到、转换并与语言模型并行运行的模型,并且必须在同一内存预算内完成。
  6. 与游戏玩法连接。 将回复解析为动作,向模型描述场景,并根据角色的情绪驱动动画。
  7. 为每个平台重复以上工作。 能在桌面 GPU 上运行的模型,未必能装进手机或独立头显。

每个步骤都可以解决。但合在一起,它们就是一个与你的游戏并行运行的机器学习项目。

设备端还是托管:取舍

设备端角色(Sentis 及类似运行时)

  • 没有每次对话的服务器成本,对话内容保留在设备上。
  • 模型随游戏一同发布后,可以离线工作。
  • 模型大小、质量和速度受玩家硬件限制。
  • 更新角色意味着发布新的版本。

托管角色(Neocortex)

  • 能使用更大的模型和流式语音,无需玩家端的硬件预算。
  • 设计师可以在编辑器中更新性格和知识,无需发布新版本。
  • 需要网络连接,并需要选择与你的用量相匹配的套餐。
  • 仍然可以进行本地原型制作:你可以在 Unity 中通过 Ollama 使用本地模型运行文字聊天。

Sentis 与 Neocortex 一览

Unity SentisNeocortex
产品定位设备端神经网络运行时完整的 AI 角色平台
角色设计代码与提示词可视化节点编辑器
语言模型自行引入、转换和调优由平台托管,并可通过 Ollama 使用本地 LLM 进行文字原型制作
语音自行构建管线流式 TTS 和 STT,声音克隆与设计
游戏玩法接口自行构建动作、可交互对象、逐句情绪
剧情结构自行构建带有 flowState 检查点的 Conversation Flows
引擎UnityUnity、Unreal、Godot、Web API
价格软件包免费,但需要投入你的工程时间每月 €9、€29 或 €99
做出会说话的 NPC 所需时间一个研究项目几分钟即可测试,几小时即可集成

为什么 Unity 团队选择 Neocortex 来做角色

跳过机器学习工作。 无需查找、转换或调优模型。设计角色,为 Unity 6 安装 Unity SDK,然后打开六个示例场景之一即可。

设计师掌控角色。 性格、情绪、知识、意图和动作都保存在可视化图中,团队中的任何人都可以在浏览器中编辑和测试。

包含语音。 玩家开口说话,角色用克隆或设计的声音回答,包括支持麦克风的 Unity WebGL 构建。

驱动游戏的回复。 每句台词都带有情绪标签,动作则以数据的形式到达,例如 { "name": "OPEN_DOOR", "targetId": "door_02" },供你的脚本执行。

将 Sentis 与 Neocortex 结合使用

Sentis 和 Neocortex 并非二选一。可以用 Sentis 进行设备端感知,例如从摄像头识别手势或姿态,然后把检测结果作为游戏事件发送给 Neocortex 角色。 玩家挥手,Sentis 对手势进行分类,你的脚本将其上报,角色则通过语音向玩家打招呼。每个工具都做它本来擅长的部分。

如何选择

如果你的目标是在玩家的硬件上运行一个自定义模型,就从 Sentis 开始。如果你的目标是一个玩家可以与之对话的 NPC,拥有由设计师掌控的性格、自己的声音,并能在游戏中执行动作,那就从 Neocortex 开始:构建角色,在示例场景中运行,之后如需在设备端检测其他内容,再加入 Sentis。

Unity 相关信息最后一次核对于 2026 年 10 月。

常见问题

Unity Sentis 能为 NPC 对话运行 LLM 吗?

它可以运行你自己导入和转换的小型语言模型,分词器需兼容 Hugging Face 的分词器文件。Neocortex 则为你托管语言模型,并在可视化编辑器中提供性格、知识、语音和动作。

Unity Sentis 与 Inference Engine 是同一个东西吗?

是的。该包在几个版本中显示为 Inference Engine,从 2.4 版本起显示名称改回 Sentis,但包 ID 一直是 com.unity.ai.inference。Neocortex 是一个独立的角色平台,为 Unity 6 提供自己的 Unity SDK。

Unity 有内置的 AI NPC 系统吗?

没有。Sentis 是神经网络运行时,Unity AI 是帮助构建游戏的编辑器助手,两者都不是运行时角色系统。Neocortex 提供运行时角色,并附有六个 Unity 示例场景作为起点。

能在 Unity 中离线运行 AI NPC 吗?

使用 Sentis 可以,但前提是你要自己找到、转换并调优每一个模型。使用 Neocortex,你可以在 Unity 中通过 Ollama 使用本地模型原型制作文字聊天,并使用托管平台处理语音和可视化编辑器。

Unity Sentis 免费吗?

Sentis 是免费的 Unity 软件包;真正的成本是在其之上构建角色所需的工程时间。

相关文章

继续阅读