Neocortex Logo

VRのNPC: Meta Quest AI Building Blocks対Neocortex

MetaのAI Building Blocksは、Quest向けUnityにLLM、音声、TTSのプロバイダーをつなぎます。自分で組み立てる必要がある部分と、NeocortexがVRのNPCをどう扱うかを比較します。

Neocortex TeamThe team behind Neocortex

· 2026年10月20日更新 · 6分で読めます

MetaのAI Building Blocksは、Quest向けUnityにLLM、音声、TTSのプロバイダーをつなぎます。自分で組み立てる必要がある部分と、NeocortexがVRのNPCをどう扱うかを比較します。

UnityでMeta Quest向けに開発していて、プレイヤーが話しかけられるキャラクターがほしいとします。Metaの AI Building Blocksから始めるべきか、それともキャラクター・プラットフォームから始めるべきか。

Metaのツールは、まず最初に確認すべき候補です。Meta XR SDKには、言語モデル、音声、テキスト読み上げのためのAI Building Blocksが含まれ、長く提供されているVoice SDKは音声コマンドと口述入力を扱います。 どちらも役立つ土台です。ただし、キャラクターそのものではありません。この比較では、それぞれがVRのNPCに何を与えてくれるか、そして何が残るかを扱います。

QuestでMetaが提供するAI機能を把握する

  • AI Building Blocks。 物体検出、大規模言語モデル、音声認識、音声合成の4つのブロックです。各ブロックは、Unityのコンポーネントと、推論を実行する場所を決めるプロバイダーを組み合わせます。推論は、クラウド、ローカルマシン、またはヘッドセット上で実行されます。Metaのドキュメントには、OpenAI、Ollama、Hugging Face、Replicate、ElevenLabsなどのプロバイダーが挙げられています。
  • 要件。 Unity 6以降、Quest 3またはQuest 3S、クラウドのプロバイダーを使うためのインターネット接続です。パススルーカメラを使うブロックには、新しめのMeta XR Core SDKとMR Utility Kitのバージョンも必要です。
  • Voice SDK。 Wit.aiを基盤にしており、音声コマンド、口述入力、TTSに使います。
  • 変わり続けるモデルのバックエンド。 MetaはLlama APIのプレビューを終了したため、言語モデルのブロックでそれを使っていたプロジェクトは、別のプロバイダーが必要です。

Metaはまた、クラウドのモデルがプロバイダーのサーバーで常に使えるとは限らないと警告しています。そのため、出荷前にプロバイダーとモデルの利用可否を確認してください。

自分で作る必要がある部分を数える

Building Blocksはモデルをつなぎます。キャラクターには、それ以上のものが必要です。ブロックの上で、チームは次のものを書いて保守しなければなりません。

  • キャラクターそのもの。 ペルソナ、経歴、知識、記憶、ガードレールを、長いプレイセッションを通じて一貫して保ちます。
  • ブロック同士の接着部分。 音声認識の出力を言語モデルに渡し、返答を音声合成に渡します。プレイヤーが割り込めるように、途中で遮る処理も必要です。
  • プロバイダーごとのアカウント。 ブロックごとに別の会社で課金される場合があり、それぞれに独自のキー、上限、価格変更があります。
  • カスタム音声。 サードパーティの音声サービスを通じて作ります。
  • シーンの認識と行動。 プレイヤーが何を持っているか、何を見ているかをキャラクターに伝え、返答を世界で起こる出来事に変えます。
  • その他のすべてのプラットフォーム。 Building BlocksはUnityのQuest向けです。PCのVRビルド、フラットスクリーン版、Unreal への移植は、最初からやり直しになります。

Meta AI Building BlocksとNeocortexを比べる

Meta AI Building BlocksNeocortex
何かQuestで使うUnity向けのプロバイダー接続完全なAIキャラクター・プラットフォーム
キャラクターの設計自分で作るビジュアルノードエディター。ブラウザでテストできる
言語モデルプロバイダーを選び、料金を払う私たちが管理する
音声TTSプロバイダーを接続するストリーミングのTTSとSTT、音声クローンとデザイン
プロバイダーと課金複数で、別々に請求される1つのアカウント、定額の月額プラン
プラットフォームQuest 3と3SUnity(デスクトップ、モバイル、Web)、Unreal、Godot、Web API
ゲームプレイとのつながり自分で作る行動、インタラクト可能なオブジェクト、セリフごとの感情
ストーリーの構造自分で作るflowState のチェックポイントを持つConversation Flows

複合現実のショップキーパーで考える

パススルーで、プレイヤーの実際の机の上に立つポーション売りを想像してください。

Building Blocksを使う場合、音声認識、言語モデル、音声合成のブロックを置き、3つのプロバイダーを選んでつなぎます。ショップキーパーの性格はシステムプロンプトにあります。プレイヤーが瓶を手に取ったときに彼女が反応するようにするには、シーンをテキストで説明し、それをプロンプトに加え、返答から意図を解析して、アニメーションを発動させるコードを書きます。声は、別の音声サービスを設定しない限り、標準のプリセットです。

Neocortexを使う場合、まずエディターで彼女を作ります。経歴にはAgentノード、気性にはPersonalityとEmotionのノード、価格表には知識ファイル、瓶の一覧にはObjectsノードを使います。ブラウザで、望みどおりに値切ってくれるまでテストできます。 Unityでは、ゲームが、プレイヤーが持っているタグ付きのオブジェクトを彼女に伝えます。彼女は自分のクローンまたはデザインした声で答え、返答はすばやく始まるようにストリーミングされます。返答には、彼女の表情のための感情タグと、{ "name": "OPEN_DOOR", "targetId": "door_02" } の形の行動が含まれ、あなたのコードがそれを実行します。たとえば、彼女の後ろの戸棚を開けます。 クエストに構造が必要な場合は、Conversation Flowで彼女を、あいさつ、値切り、秘密のレシピへと進めます。APIは各チェックポイントを flowState として報告します。

ヘッドセットの中でキャラクターが動いている様子は、Unityの XR Interaction Toolkitを使ったVRデモでご覧いただけます。

Quest プロジェクトに合う選択肢を選ぶ

Building Blocksが合うのは、テキストフィールドへの口述入力や、複合現実の機能のための物体検出など、1つの機能だけが必要で、プロバイダーのアカウントを自分で管理する覚悟があるチームです。

Neocortexが合うのは、キャラクターがほしいチームです。アプリを作り直さずに性格と知識を編集できるデザイナー、それぞれのキャラクターに属する声、シーンに対して行動するNPCがほしい場合です。Questから離れる可能性があるプロジェクトにも合います。同じキャラクターが他のプラットフォームやエンジンでも動くからです。

両方を1つのアプリに入れることもできます。 「pause」や「inventory」のようなメニューのコマンドにはVoice SDKを使い、会話にはNeocortexのキャラクターを使います。

プランについては、商用リリースにはProのEUR 29/月またはTeamのEUR 99/月が必要です。Proでは、APIを通じて最大6キャラクターのグループチャットが使えます。これは、VRでの仲間のパーティーに適しています。

ヘッドセットに1体のキャラクターを入れる

プレイヤーが最初に出会うNPCから始めてください。ブラウザで作り、Unity SDKを追加して、ヘッドセットの中で返答を聞きます。その後のキャラクターも、同じ手順に従います。

Metaの詳細は2026年10月に最後に確認しました。

よくある質問

MetaのAI Building Blocksとは何ですか?

Meta XR SDK内のUnityコンポーネントで、物体検出、言語モデル、音声認識、音声合成のためのものです。それぞれ、自分で選んだプロバイダーに接続します。Neocortexは、ビジュアルエディター、音声、ゲームプレイの行動を1つのUnity SDKにまとめた、完全なキャラクター・プラットフォームです。

MetaのAI Building Blocksは、どのヘッドセットに対応していますか?

Metaは、Quest 3またはQuest 3SでのUnity 6以降を推奨しています。Neocortexのキャラクターは、デスクトップ、モバイル、WebのUnityで動き、同じキャラクターはUnreal、Godot、Web APIを通じても動きます。

Meta Llama APIは、Questアプリでまだ使えますか?

いいえ。MetaはLlama APIのプレビューを終了したため、言語モデルのブロックには、OpenAIやOllamaなどの別のプロバイダーが必要です。Neocortexは言語モデルを管理するため、差し替えるプロバイダーはありません。

VRのNPCは、プレイヤーの周りにあるオブジェクトに反応できますか?

Building Blocksだけでは、そのままではできません。その連携は自分で書く必要があります。Neocortexでは、ゲームが近くのオブジェクトと最近の出来事を送り、キャラクターはドアを開けたりアイテムを渡したりといった行動を返します。

VRのキャラクターの声をクローンできますか?

Building Blocksでは、TTSプロバイダーを接続して、そこで声を管理します。Neocortexには、権利のある短いサンプルからの音声クローンと、テキストの説明からの音声デザインが含まれます。カスタム音声はProで5件、Teamで20件です。

関連記事

こちらもおすすめ