Neocortex Logo

Snapdragon Game AI SDK или Neocortex для ИИ-NPC

Что предлагает Snapdragon Game AI SDK для NPC, работающих на устройстве, на NPU Snapdragon, и где в этом месте находится Neocortex для игр, которые выходят на разном железе или работают офлайн.

Neocortex TeamThe team behind Neocortex

· 7 мин чтения

Что предлагает Snapdragon Game AI SDK для NPC, работающих на устройстве, на NPU Snapdragon, и где в этом месте находится Neocortex для игр, которые выходят на разном железе или работают офлайн.

Краткий ответ: Snapdragon Game AI SDK - это набор плагинов Unreal Engine от Qualcomm для запуска распознавания речи, языковой модели и синтеза речи на NPU смартфонов и ПК на Snapdragon. Это инструмент для одного семейства чипов, а не платформа персонажей. Neocortex даёт готовых ИИ-персонажей, которые работают в нашем облаке на любом железе, а с нашей командой и на ваших серверах, полностью офлайн или внутри сборки игры.

Если ваша игра выходит только на устройствах Snapdragon, SDK - один из путей к NPC на устройстве. Большинство игр выходят на нескольких видах железа, и вот тут выбор становится интересным.

Snapdragon Game AI SDK и Neocortex в двух словах

Snapdragon Game AI SDKNeocortex
Что этоПлагины Unreal для ASR, LLM и TTS на устройствеПлатформа ИИ-персонажей с редактором, SDK и голосом
Где работаетNPU Hexagon на поддерживаемых устройствах SnapdragonНаше облако, ваши серверы или компьютер игрока
ДвижкиUnreal Engine 5.6 и 5.7Unity, Unreal Engine 5, Godot, Web API
ПлатформыAndroid и Windows on Arm; TTS только на AndroidЛюбое устройство, которое обращается к API; локальные варианты планируются с нашей командой
МоделиВарианты Whisper, MeloTTS, LLM, которую вы подготавливаете для GenieУправляются в облаке; для локальных вариантов выбираются с нашей командой
Создание персонажаКод на C++ и BlueprintВизуальный редактор узлов
ОфлайнДа, на устройствеДа, без связи с внешним миром по индивидуальным соглашениям
ЦеныИсходный код плагина под BSD 3-Clause; среды выполнения и модели по своим условиям9, 29 или 99 EUR в месяц; Custom для локального развёртывания

Что входит в Snapdragon Game AI SDK?

Qualcomm представила SDK на GDC как способ создавать NPC на устройстве, ИИ-напарников, компаньонов и наставников для мобильных игр и игр на ПК. Он публикуется как плагины Unreal Engine в репозитории Snapdragon Game Studios на GitHub и состоит из трёх частей.

  • Распознавание речи. Преобразование речи в текст в реальном времени через Voice AI ASR SDK от Qualcomm, с Whisper small (FP16 или квантованный) и Whisper large v3 turbo. Поддерживаются Android и Windows on Arm.
  • Конвейеры LLM. Диалоги, потоковые ответы, вызовы инструментов, эмбеддинги и поиск по векторам, с интерфейсами на C++ и Blueprint. Инференс идёт через Genie SDK от Qualcomm, а файлы модели для каждого целевого устройства вы готовите через Qualcomm AI Hub.
  • Синтез речи. Синтез речи через Voice AI TTS SDK с MeloTTS, на английском, китайском и испанском. Поддерживает только Android.

Выполнение на NPU требует поддерживаемого железа Snapdragon и файлов модели, скомпилированных под эту цель. Среды выполнения SDK берутся из Qualcomm Package Manager. Исходный код плагина распространяется по BSD 3-Clause, а среды выполнения и модели сохраняют свои лицензионные условия. На страницах не указана цена, и там нет ни одной выпущенной игры, созданной с его помощью.

Что вам всё равно придётся сделать самим?

SDK предоставляет инференс. Персонаж, с которым игрок может говорить, требует многого вокруг него. Заложите:

  • Персонажа. Образ, предысторию, тон и ограничения, записанные как промпты и настроенные под модель, которая помещается на телефон вместе с вашей игрой.
  • Знания. Модуль поиска запрашивает подготовленный векторный индекс. Он не строит индекс по вашим дизайн-документам, поэтому индексация лора - ваша задача.
  • Память. Отслеживание того, что игрок говорил несколько сессий назад, за пределами контекстного окна модели.
  • Игровые связки. Вызовы инструментов дают канал, но решить, какие действия существуют, проверить их и выполнить - задача вашего кода.
  • Структура истории. Ветвящиеся сюжетные точки и контрольные точки, на которые может реагировать игра.
  • Голос на ПК. Синтез речи работает только на Android, поэтому сборкам для Windows нужен другой голосовой путь.
  • Запасной вариант. Игрокам на других чипах нужно что-то предложить: облачного персонажа, заранее написанные диалоги или вообще без этой функции.
  • Проверку на каждом устройстве. Файлы модели компилируются под каждую цель, поэтому каждый поддерживаемый чип - отдельный цикл тестирования.

В Neocortex большая часть этого списка - это узел в редакторе. Характер, Эмоции, Знания (загрузите PDF или TXT), Мир, Объекты, Намерения и Действия настраиваются визуально и тестируются в браузере. Потоки диалога возвращают ключевые слова контрольных точек flowState, а ответы несут тег эмоции и действия вроде { "name": "OPEN_DOOR", "targetId": "door_02" }, которые ваши скрипты выполняют. По API на тарифах Pro и Team до шести персонажей могут участвовать в одном разговоре.

Что происходит на устройствах без чипа Snapdragon?

SDK для NPU работает там, где есть его NPU. Игра на Android достигает телефонов с чипами от нескольких производителей. На ПК большинство игроков используют машины x86, а не Windows on Arm. iOS и консоли не входят в список платформ SDK. Каждому из этих игроков нужен другой путь к тому же персонажу, а значит, второй стек инференса или вторая реализация.

Облачный персонаж избавляет от этого разделения. Модель работает на наших серверах, поэтому персонаж Neocortex ведёт себя одинаково на флагманском телефоне, старом ноутбуке или в сборке для браузера, а сборки Unity WebGL могут принимать ввод с микрофона. Облачный продукт создан для разговора в реальном времени, с потоковым распознаванием речи и синтезом речи, клонированием голоса и дизайном голоса.

Среды выполнения от других поставщиков, привязанные к железу, ставят тот же вопрос. Мы разбираем их в сравнениях NVIDIA ACE, Unity Sentis и Meta Quest AI Building Blocks, а также в обзоре инструментов ИИ-NPC с локальным ИИ.

Может ли Neocortex работать on-premise или офлайн?

Да. Некоторым проектам нельзя полагаться на публичное облако: тренажёр в закрытой сети, киоск в музее, стенд на мероприятии с нестабильным Wi-Fi, клиент со строгими правилами работы с данными. Для них Neocortex предлагает индивидуальные (корпоративные) варианты, которые настраиваются в разговоре с нашей командой, а не самостоятельно:

  • Полная платформа на ваших серверах или в приватном облаке, включая редактор персонажей, API, ваших персонажей и потоки диалога.
  • Локальный голос: распознавание речи и синтез речи тоже работают on-premise, а не только языковая модель.
  • Работа без связи с внешним миром, полностью без подключения к интернету.
  • Инференс на устройстве, который поставляется внутри сборки игры и работает на компьютере игрока.
  • Наша команда вместе с вашей при развёртывании, выборе моделей и интеграции.

Развёртывания on-premise подбираются вместе со студией, поэтому время отклика зависит от железа, которое вы выберете вместе.

Измеренная скорость. На ноутбуке с RTX 3080 (8 ГБ) наша среда выполнения на устройстве выдаёт первый токен за 0,06 с и начинает говорить примерно через одну секунду, потому что озвучивает первое предложение, пока генерируется остальное. Распознавание речи и синтез речи работают на CPU, поэтому модели 3B нужно около 3 ГБ VRAM, а модель 2B генерирует более 300 токенов в секунду, занимая меньше 1 ГБ.

Если вашему проекту нужно что-то из этого, свяжитесь с нами.

Какой вариант подходит вашему проекту?

Ваша ситуацияЧто лучше подходит
Игра на Unreal, которая выходит только на устройствах Snapdragon, а инженеры готовы писать слой персонажа на C++Snapdragon Game AI SDK
Проект на Unity или GodotNeocortex
Игра, которая выходит на телефоны, ПК и в браузеры, с чипами от нескольких производителейОблако Neocortex
Дизайнерам нужно редактировать персонажей без кодаРедактор Neocortex
Защищённый сайт, симулятор или киоск без интернетаNeocortex on-premise, без связи с внешним миром
Персонажи должны работать на устройстве игрока на разном железе, с поддержкойNeocortex на устройстве, с нашей командой

О том, как тарифы и расходы на использование сравниваются между поставщиками, читайте в нашем сравнении моделей ценообразования ИИ-NPC и в хабе сравнений.

Итог

Snapdragon Game AI SDK даёт разработчикам Unreal строительные блоки для речи и языка на устройстве для одного семейства чипов. Neocortex даёт сам персонаж, который создаётся визуально и работает там, где это нужно проекту: в нашем облаке для каждого игрока на любом устройстве или на ваших серверах, офлайн либо внутри сборки игры с нашей командой. Создайте первого персонажа, а если игре нужна локальная работа, поговорите с нами о развёртывании по индивидуальным условиям.

Данные о Snapdragon Game AI SDK проверены в октябре 2026 года.

Частые вопросы

Поддерживает ли Snapdragon Game AI SDK Unity?

Нет, его плагины предназначены для Unreal Engine 5.6 и 5.7. У Neocortex есть SDK для Unity 6 с шестью примерами сцен, а также SDK для Unreal Engine 5 и Godot и Web API.

На каких устройствах работает Snapdragon Game AI SDK?

Он рассчитан на устройства Snapdragon под Android и Windows on Arm с инференсом на NPU на поддерживаемом железе, а его плагин синтеза речи работает только на Android. Облачные персонажи Neocortex работают на наших серверах, поэтому от чипа игрока они не зависят.

Бесплатен ли Snapdragon Game AI SDK?

Исходный код плагина опубликован по лицензии BSD 3-Clause, а среды выполнения Qualcomm и модели сохраняют свои условия.

Какие модели использует Snapdragon Game AI SDK?

Для распознавания речи используются варианты Whisper, для синтеза речи - MeloTTS, а языковую модель вы подготавливаете для среды выполнения Genie от Qualcomm. Neocortex управляет моделями за вас в облаке, а наша команда помогает выбрать их для развёртывания on-premise или на устройстве.

Могут ли ИИ-NPC работать офлайн на ПК и мобильных устройствах?

Да, SDK для работы на устройстве запускают их на поддерживаемом железе. Neocortex может работать без связи с внешним миром на ваших серверах, включая локальное распознавание речи и синтез речи, или поставлять инференс внутри сборки игры по индивидуальным условиям с нашей командой.

Похожие статьи

Читайте также