Neocortex Godot SDK 发布:为 Godot 4 带来有语音的 AI NPC
我们的开源 Godot SDK 为 Godot 4 带来 AI NPC:语音聊天、带情绪的 AI 对话、动作、口型同步和群聊,全部可通过 GDScript 使用。
Neocortex TeamThe team behind Neocortex
· 阅读约 6 分钟

Godot 是大多数 AI 角色平台都会跳过的引擎。现在不再如此:我们的 Godot SDK 已经发布。在 Neocortex 上设计一个角色,把插件放进你的 Godot 4 项目,玩家就可以大声与它说话,听它用自己的声音回答,并看着它在你的世界中行动。
它是开源的,通过 GDScript 工作,并附带七个示例场景,让你在构建自己的内容之前就能看到所有功能的运行效果。
Godot SDK 为你的游戏增加了什么
- 玩家可以对话的角色,通过打字或语音。
- 每句台词都带有声音和情绪,因此动画和头像可以跟随情绪变化。
- 动作,运行你自己的代码,例如开门或交出一件物品。
- 对场景的感知,让角色知道周围有什么。
- 口型同步、群聊以及问答主持人。
- 记忆,让对话能从上次停下的地方继续。

无需对话树的 Godot AI 对话
分支式对话树在玩家问出你没有写过的问题时就会失效。使用 Neocortex,你设计的是角色,而不是每一句台词:它的性格、它对你世界的了解、它说话的方式,以及它被允许做的事情。你可以在浏览器中测试,直到它听起来合适,然后在 Godot 中使用同一个角色。
每个回复都以一系列台词的形式到达,每句都有自己的情绪,因此店主在同一个回答中可以对一笔交易感到高兴,又对讨价还价感到不满。角色也会记住对话内容,你还可以向它发送最近的游戏事件,例如"玩家刚刚赢得了决斗",让它的回答符合刚刚发生的事情。关于设计方面的更多内容,请参阅我们关于如何赋予 NPC 独特性格和 NPC 记忆的指南。
Godot 中与 NPC 语音聊天
玩家可以说话而不必打字。SDK 会通过语音检测或按键说话来录制麦克风,将语音转换为文字,然后角色会用它自己的声音回答。在回复的其余部分仍在生成时,语音就已经开始播放,因此对话不会停滞。
你可以选择回复的配音方式:每句台词带自己的情绪、整个回复作为一段音频,或仅显示文字。在 Android 上,SDK 会在启动时请求麦克风权限。我们关于 AI NPC 语音流水线的文章解释了从麦克风到扬声器之间发生的过程。
会根据自己所说内容采取行动的 Godot NPC
说话只是一半。在编辑器中为角色设置动作,例如 GIVE_ITEM、OPEN_DOOR 或 FOLLOW_PLAYER,并把每个动作连接到一个 GDScript 函数:
@onready var agent: NeocortexSmartAgent = $Blacksmith/NeocortexSmartAgent
func _ready() -> void:
agent.chat_line_started.connect(func(line: NeocortexChatLine): $Subtitle.text = line.text)
agent.register_action("GIVE_ITEM", _give_item)
func _give_item(action: NeocortexChatAction) -> void:
inventory.give(action.target_id) # your own inventory code角色负责提出请求,游戏由你来决定。将场景中的物体标记为可交互对象,角色就会知道附近有什么,并能把动作指向它们:"走到红色方块,然后走到蓝色方块"会变成两个动作,每个动作都带有目标。一个回复可以包含多个动作,并依次执行。

口型同步、群聊与问答
- 口型同步: 角色的嘴巴会根据其台词以 ARKit 风格的混合形状移动,这是大多数角色模型已经使用的标准。
- 群聊: 在一个场景中放入多个角色,让它们与玩家以及彼此对话,并允许它们在对话进行时加入或离开。
- 问答主持人: 角色会根据你的问题集为一名或多名玩家主持问答,提示、跳过和计分均由系统自动处理。

如何为 Godot 4 添加 AI NPC
- 下载最新版本,并将
addons/neocortex-godot-sdk复制到你的项目中。 - 在 Project Settings > Plugins 中启用 Neocortex,并将你的 API 密钥粘贴到 Neocortex 面板中。
- 选择 Project > Tools > Neocortex > Complete Voice Chat,选择你的角色,然后按下播放。
Godot 快速入门中有详细信息,而我们的教程在 Godot 4 中添加 AI NPC 对话则会逐步构建一个完整的铁匠场景。
Godot SDK 还是你自己的 LLM 集成?
你可以使用 Godot 的 HTTPRequest 节点向 LLM API 发送文字并打印答案。这可以作为周末原型很好地运行。但是,玩家会花上数小时与之相处的角色则需要更多:语音识别、每个角色的声音、情绪、跨会话的记忆、游戏可以信赖的动作,以及防止某个玩家耗尽你账单的限制。
SDK 涵盖了所有这些功能,并且每个 API 密钥上的按玩家和按角色的用量限制都在我们的服务器上强制执行。如需更广泛地了解各种选择,请参阅我们关于 Godot 的 AI NPC 工具的综述。
开源
SDK 托管在 GitHub 上,采用 Apache 2.0 许可,欢迎提交 issue 和 pull request。同样的角色也可以在 Unity、Unreal Engine 和网页中运行,因此你为 Godot 游戏设计的角色可以跟随你进入下一个项目。
请在我们的 Discord 上告诉我们你的 Godot 游戏接下来需要什么。
常见问题
有适用于 Godot 的 AI NPC 插件吗?
有。Neocortex Godot SDK 是一个适用于 Godot 4.7 及更高版本的开源编辑器插件。它可以为你的项目添加带有情绪、动作、口型同步、群聊和问答的有语音 AI 角色。
如何为 Godot 中的 NPC 添加 AI 对话?
在 Neocortex 中设计角色,将 Godot SDK 添加到项目的 addons 文件夹中,启用插件并粘贴你的 API 密钥。然后从 Project > Tools > Neocortex 添加一个聊天场景,或者在 GDScript 中对 NeocortexSmartAgent 调用 text_to_audio。
我能为 Godot NPC 使用 ChatGPT 或其他 LLM 吗?
你可以使用 Godot 的 HTTPRequest 节点自行调用 LLM API,但之后你需要在其之上构建语音、情绪、记忆和动作。Neocortex Godot SDK 在一个插件中提供了所有这些功能,角色则在可视化编辑器中设计。
玩家能用语音与 Godot NPC 对话吗?
可以。玩家通过语音检测或按键说话对着麦克风说话,角色会用它自己的声音回答,并且每句台词都带有情绪。
Godot SDK 支持口型同步吗?
支持。NeocortexFaceAnimator 会在角色说话时驱动其网格上 ARKit 风格的嘴部混合形状。
Godot 中的 AI NPC 能触发游戏玩法吗?
可以。为角色设置 GIVE_ITEM 或 OPEN_DOOR 等动作,每个动作都会调用你注册的 GDScript 函数。动作可以指向场景中的物体,是否执行则由你的代码决定。
该 SDK 支持哪些 Godot 版本?
Godot 4.7 或更高版本。
Neocortex Godot SDK 是开源的吗?
是的。它托管在 GitHub 上,采用 Apache 2.0 许可。






