Neocortex Logo

ゲームのアクセシビリティと音声操作:操作は少なく、遊びは多く

Neocortexでゲームのアクセシビリティのための音声操作を追加します。メニュー、インベントリ、カメラを、覚える必要のない平易な言葉で操作できる、オフラインのデバイス上のコマンドです。

Neocortex TeamThe team behind Neocortex

· 6分で読めます

Neocortexでゲームのアクセシビリティのための音声操作を追加します。メニュー、インベントリ、カメラを、覚える必要のない平易な言葉で操作できる、オフラインのデバイス上のコマンドです。

手の動きに制限がある方、RSI(反復性ストレス障害)の方、片手しか使えない方にとって、ゲームで一番つらいのは、ボスではないことがよくあります。すばやく正確に押すことを前提にした、メニュー、インベントリのグリッド、カメラの操作です。Neocortex Voice Commandsは、そうしたプレイヤーに別の入り口を与えます。平易な話し言葉を、プレイヤー自身のPCの上で、ゲームの操作に対応させます。オフラインで、音声はデバイスの外に出ません。キーの割り当て変更、切り替え、調整できるタイミングと並ぶ選択肢のひとつで、物珍しい機能としてではなく、完全な入力方法として扱うときに最も役立ちます。

どんな場面か

Lanternfallは、Gullmouthという崖の上の漁村を舞台にした、オリジナルのターン制の冒険ゲームです。両手首にRSIを抱えるプレイヤーが、トラックボールを使って短い時間ずつ遊ぶ場面を想像してください。キャラクターを動かすことは問題ありません。つらいのは、入れ子になったメニューを長く移動することです。

アクセシビリティの設定で音声操作をオンにすると、1ターンは次のように聞こえます。

「インベントリを開いて。嵐のランタンを装備して。Bramに強壮薬を使って。」

コマンドは3つで、アイテムのグリッドを一度も往復していません。プレイヤーの仲間のBramは、また立ち上がりました。次は「カメラを左に回して、ズームイン」です。視点が港の階段へ回ります。「真鍮の鍵を拾って。それを宝箱に使って。」「それ」という言葉は、いま拾ったばかりの鍵を指します。そして「ターン終了」と言うと、潮が満ちてきます。

激しい戦いの後で、何がまだ周りにあるのか分からなくなったとき、プレイヤーは町の案内役をしている灯台守の老人、Pellに尋ねます。Pellは、AIキャラクターです。

プレイヤー: Pell、今の画面には何がある? Pell: 港の階段にいるよ。左に鍵のかかった宝箱があって、まっすぐ先には門。Bramは後ろで体力が半分ほどだ。カモメが2羽。敵はいないよ。

Pellがこう答えられるのは、ゲームが質問と一緒に、見えているオブジェクトとキャラクターを送るからです。このターンでトラックボールが置き換えられたわけではありません。手で動かす方が楽なときは手で動き、話す方が楽なときは話します。

Neocortexの仕組み

  • 自然な言い回し、コマンドの一覧は不要。 「バッグを開いて」「インベントリを見せて」「インベントリ」のどれでも、同じアクションを起こせます。プレイヤーは、先にカンニングペーパーを読まずに、言いたいことをそのまま話せます。すぐに疲れる方や短い時間で遊ぶ方に役立ちます。
  • 1文で複数のアクション。 「インベントリを開いて、ランタンを装備して」は2つのコマンドとして受け取られます。プレイヤーは一度話すだけで、手順ごとに会話のアクションを繰り返す必要がありません。
  • 数量。 「魚を3匹捨てて」や「ロープを2本買って」は、数量のスライダーをクリック、クリック、クリックと操作する手間を省きます。
  • 文脈。 「真鍮の鍵を拾って。それを宝箱に使って。」では、「それ」が鍵を指すと解釈されます。
  • プッシュ・トゥ・トークか、常時の聞き取りか。 常時の聞き取りは、キーを押し続けるのが負担になるプレイヤーに向いています。プッシュ・トゥ・トークは、プレイヤーがすでに上手に使っている1つの入力に割り当てられます。割り当ては、設定で公開する側が決めます。
  • デバイス上、オフライン、プライベート。 認識と照合は、プレイヤーのPCで動きます。音声はデバイスの外に出ず、接続にも依存せず、話してから動くまでにサーバーの遅延もありません。
  • 俳優、アクション、オブジェクトからなるコマンドセット。 Neocortexのダッシュボードで、それぞれに数個のサンプルの言い回しを付けて設計します。メニューの名前、アイテムの名前、カメラの動き、よくあるアクションを含みます。
  • 複数の言語。 言語ごとに1つのコマンドセットがあるため、プレイヤーは最も話しやすい言語を使えます。

Pellは、NeocortexのAIキャラクターです。ゲームは見えているものをメタデータとして送ります。各エンティティにはID、名前、位置、体力などのプロパティがあります。Pellは、そのゲームが送ったものだけを説明するので、説明の正確さは送られたデータの正確さと同じです。正確に保てば、Pellは頼れる目になります。抜けがあれば、Pellはそれを知りません。

作ってみたいアイデア

音声でのメニュー操作。 「設定を開いて」「字幕をオンにして」「文字を大きくして」「最後のセーブを読み込んで」。メニューは、多くのプレイヤーが最初に行き詰まる場所であり、最も始めやすい場所でもあります。どの選択肢にも、コマンドセットが再利用できる名前がすでにあるからです。

インベントリの管理。 「魚を全部売って」「ポーションを一番上に移動して」「ロープを2本捨てて」。グリッド状のインベントリは、ゲームの中でもとくに正確な指示を求めます。音声は、1分かかるドラッグを1文にまとめます。

音声だけで完全に遊べる、ターン制のゲーム。 戦術ゲームやカードゲームでは、時間制限がないため、音声ですべての操作を扱えます。「ナイトを橋に動かして」「左の車線で霜のカードを出して」「ターン終了」。画面上のすべての操作に、話し言葉の対応を用意すれば、コントローラーを使わずにゲームを最後まで進められます。

要求に応じて画面を説明するガイド。 Pellをさらに発展させましょう。要求されたときに、ガイドのキャラクターが現在の目的を読み上げたり、部屋にあるものを要約したり、ステータスアイコンの意味を説明したりします。ゲームのヘルプの文章をナレッジベースにして使えます(Starterでは5件のアップロード、Teamでは最大100件)。要求されたときにだけ話すので、必要のないプレイヤーにとって、ガイドがゲームの邪魔をすることはありません。

作り方

Neocortex Voice Commandsは、プレイヤーのマシン上でPCゲームの中で動きます。最もすっきりした作り方は、音声をもう1つの入力デバイスとして扱うことです。照合された各コマンドは、ボタンと同じ入力アクションを起こします。そのため、プレイヤーがどの経路で操作しても、メニュー、インベントリ、カメラは同じように動きます。

  1. 難しい部分を見つける。 1回のセッションを遊び、正確なタイミング、すばやい連続入力、長いメニューの移動を必要とする操作をすべてメモします。それが最初のコマンドになります。
  2. コマンドセットを設計する。 画面にあるものを映すように、Neocortexのダッシュボードで設計します。メニューの名前やアイテムの名前はオブジェクトとして、「開く」「装備」「使う」「捨てる」などの動詞はアクションとして、プレイヤーが実際に使う言い回しを入れます。
  3. ゲームにNeocortex Voice Commandsを追加し、 照合された各コマンドを、既存の入力アクションにつなぎます。音声専用の別の経路は作りません。
  4. オプションを公開する。 アクセシビリティの設定で両方の聞き取りモードを提供し、プッシュ・トゥ・トークを任意の入力に割り当てられるようにし、セーブの上書きのように取り返しのつかない操作の前には確認を求めます。
  5. ゲームに合うなら、画面を説明するガイドを追加する。 見えているエンティティをメタデータとして受け取り、「今の画面には何がある?」に自分の声で答えるNeocortexのAIキャラクターです。Web APIまたはエンジンのSDKを通じて接続します。
  6. それに頼るプレイヤーと一緒にテストし、 プレイヤーが話す言語ごとにコマンドセットを追加します。

音声でできる操作はすべて、ほかの方法でも届くようにしてください。キーの割り当て変更も残してください。音声は多くのプレイヤーを助けますが、誰もが遊ぶために話せるわけではなく、話したくもありません。話し方に違いがある方、同じ部屋にほかの人がいる方、コントローラーの方が好きな方がいます。優れたアクセシビリティのメニューは多くの選択肢を用意します。音声はその中に加える良い選択肢であり、代わりになるものではありません。

Voice Commandsはライセンス付きのSDKです。Voice Commandsのライセンスについてはお問い合わせください。Pellのようなガイドのキャラクターは、AIキャラクターとAPIで動きます。どのプランにも含まれます。

アクセシブルな音声操作は、AI NPC、アンビエントAI、音声コマンドのユースケースの1つです。ヘッドセットで手がふさがるプレイはVRの音声コマンドをご覧ください。ゲームを語るキャラクターについてはAIゲームマスターとナレーターをご覧ください。全体像は音声で操作するゲームのページにあり、言語については言語のサポートの記事で扱っています。まずメニューを1つ選び、話すだけで全部操作できるようにしてから、それを必要とするプレイヤーに次に何を対応すべきか聞いてみてください。

2026年10月に確認。

よくある質問

音声操作でゲームのアクセシビリティは上がりますか?

多くのプレイヤーにとっては、はい。音声操作により、手の動きに制限がある方、RSIの方、片手で操作する方は、速いボタン操作や正確な操作をしなくても、メニュー、インベントリ、よくあるアクションに届きます。Neocortex Voice Commandsは、キーの割り当て変更などの設定と並ぶ選択肢として、プレイヤーのPCに追加されます。

プレイヤーは音声コマンドを覚える必要がありますか?

いいえ。Neocortex Voice Commandsは自然な言い回しを理解するため、「バッグを開いて」「インベントリを見せて」「インベントリ」のどれでも、同じアクションを起こせます。Neocortexのダッシュボードで、コマンドごとに数個のサンプルの言い回しを追加します。

ゲーム内の音声操作はプライベートですか?

Neocortex Voice Commandsでは、音声はプレイヤーのマシン上で認識され、照合されます。音声はデバイスの外に出ません。オフラインで動き、クラウドとのやり取りはありません。

AIキャラクターは、画面にあるものを説明できますか?

ゲームが伝えれば可能です。見えているオブジェクトとキャラクターをメタデータとしてNeocortexのAIキャラクターに送ると、プレイヤーが尋ねたときに、そのキャラクターが自分の声で説明します。キャラクターが知っているのは、ゲームが送ったものだけです。

関連記事

こちらもおすすめ