Neocortex Logo

Meta Quest AI Building Blocks vs Neocortex untuk NPC VR

AI Building Blocks dari Meta menghubungkan penyedia LLM, speech, dan TTS ke Unity untuk Quest. Apa yang masih harus Anda rakit sendiri, dan bagaimana Neocortex menangani NPC VR.

Neocortex TeamThe team behind Neocortex

· Diperbarui 20 Okt 2026 · 6 menit baca

AI Building Blocks dari Meta menghubungkan penyedia LLM, speech, dan TTS ke Unity untuk Quest. Apa yang masih harus Anda rakit sendiri, dan bagaimana Neocortex menangani NPC VR.

Anda membangun untuk Meta Quest di Unity dan menginginkan karakter yang bisa diajak bicara pemain. Haruskah Anda mulai dengan AI Building Blocks milik Meta, atau dengan platform karakter?

Alat Meta adalah tempat pertama yang jelas untuk dilihat. Meta XR SDK mencakup AI Building Blocks untuk model bahasa, speech, dan text-to-speech, dan Voice SDK yang sudah lama ada menangani perintah suara dan dikte. Keduanya berguna sebagai infrastruktur dasar. Keduanya bukan karakter. Perbandingan ini membahas apa yang diberikan masing-masing untuk NPC VR, dan apa yang tersisa.

Ketahui apa yang Meta kirimkan untuk AI di Quest

  • AI Building Blocks. Empat blok: Object Detection, Large Language Models, Speech to Text, dan Text to Speech. Setiap blok memasangkan komponen Unity dengan penyedia yang menentukan tempat inferensi berjalan: di cloud, di mesin lokal, atau di headset. Dokumentasi Meta menyebut penyedia seperti OpenAI, Ollama, Hugging Face, Replicate, dan ElevenLabs.
  • Persyaratan. Unity 6 atau lebih baru, Quest 3 atau 3S, dan koneksi internet untuk penyedia cloud. Blok yang memakai kamera passthrough juga membutuhkan versi terbaru Meta XR Core SDK dan MR Utility Kit.
  • Voice SDK. Dibangun di atas Wit.ai, untuk perintah suara, dikte, dan TTS.
  • Backend model yang berubah. Meta telah menghentikan pratinjau Llama API, jadi proyek yang memakainya untuk blok model bahasa membutuhkan penyedia lain.

Meta juga memperingatkan bahwa model cloud tidak selalu tersedia di server penyedia, jadi Anda perlu memeriksa ketersediaan penyedia dan model sebelum merilis.

Hitung apa yang masih harus Anda bangun

Building Blocks menghubungkan model. Sebuah karakter membutuhkan lebih dari itu. Di atas blok-blok itu, tim Anda menulis dan memelihara:

  • Karakter itu sendiri. Persona, latar belakang, pengetahuan, memori, dan pagar pengaman, yang harus tetap konsisten selama sesi bermain yang panjang.
  • Perekat antar blok. Keluaran speech-to-text masuk ke model bahasa, balasan masuk ke text-to-speech, dengan penanganan interupsi agar pemain bisa menyela.
  • Akun penyedia terpisah. Setiap blok bisa ditagihkan melalui perusahaan yang berbeda, dengan key, batas, dan perubahan harga masing-masing.
  • Suara kustom lewat layanan suara pihak ketiga.
  • Kesadaran adegan dan aksi. Memberi tahu karakter apa yang sedang dipegang atau dilihat pemain, dan mengubah balasan menjadi sesuatu yang terjadi di dunia.
  • Setiap platform lain. Building Blocks menargetkan Quest di Unity. Build VR PC, versi layar datar, atau port Unreal harus dimulai dari awal.

Bandingkan AI Building Blocks Meta dan Neocortex

Meta AI Building BlocksNeocortex
Apa ituKonektor penyedia untuk Unity di QuestPlatform karakter AI yang lengkap
Desain karakterBangun sendiriNode editor visual, diuji di browser
Model bahasaPilih dan bayar penyediaDikelola untuk Anda
SuaraHubungkan penyedia TTSTTS dan STT yang dialirkan, kloning dan desain suara
Penyedia dan penagihanBeberapa, ditagih terpisahSatu akun, paket bulanan tetap
PlatformQuest 3 dan 3SUnity di desktop, mobile, dan web, plus Unreal, Godot, dan Web API
Kait gameplayBangun sendiriAksi, objek yang bisa diinteraksi, emosi per baris
Struktur ceritaBangun sendiriConversation Flows dengan checkpoint flowState

Telusuri sebuah pedagang realitas campuran

Bayangkan seorang penjual ramuan berdiri di meja asli pemain dalam mode passthrough.

Dengan Building Blocks, Anda memasang blok speech-to-text, model bahasa, dan text-to-speech, memilih tiga penyedia, dan menghubungkannya. Kepribadian pedagang tinggal di system prompt. Agar ia bereaksi saat pemain mengambil sebuah botol, Anda menulis kode yang mendeskripsikan adegan dalam teks, menambahkannya ke prompt, mengurai balasan untuk mencari intent, lalu memicu animasi. Suaranya adalah preset bawaan kecuali Anda menyiapkan layanan suara terpisah.

Dengan Neocortex, Anda membangunnya di editor terlebih dahulu: node Agent untuk latar belakang, node Personality dan Emotion untuk temperamennya, file Knowledge dengan daftar harga, dan node Objects yang berisi daftar botol. Anda mengujinya di browser sampai ia menawar sesuai keinginan Anda. Di Unity, game Anda memberi tahu dia objek bertag mana yang sedang dipegang pemain. Ia menjawab dengan suaranya sendiri yang dikloning atau dirancang, dialirkan agar balasannya cepat dimulai, dan balasannya membawa tag emosi untuk wajahnya ditambah aksi dalam bentuk { "name": "OPEN_DOOR", "targetId": "door_02" } yang dijalankan kode Anda, misalnya membuka lemari di belakangnya. Jika quest membutuhkan struktur, Conversation Flow memindahkannya dari sapaan ke tawar-menawar hingga resep rahasia, dan API melaporkan setiap checkpoint sebagai flowState.

Anda bisa melihat karakter berjalan di headset dalam demo VR dengan XR Interaction Toolkit Unity kami.

Pilih yang paling sesuai untuk proyek Quest Anda

Building Blocks cocok untuk tim yang hanya membutuhkan satu kemampuan, seperti dikte ke kolom teks atau object detection untuk fitur realitas campuran, dan siap mengelola akun penyedia sendiri.

Neocortex cocok untuk tim yang menginginkan karakter: desainer yang mengedit kepribadian dan pengetahuan tanpa membangun ulang aplikasi, suara yang dimiliki setiap karakter, dan NPC yang bertindak terhadap adegan. Ini juga cocok untuk proyek yang mungkin keluar dari Quest, karena karakter yang sama berjalan di platform dan engine lain.

Keduanya bisa berada dalam satu aplikasi. Gunakan Voice SDK untuk perintah menu seperti "pause" atau "inventory", dan karakter Neocortex untuk percakapan.

Soal paket: rilis komersial membutuhkan Pro (EUR 29 per bulan) atau Team (EUR 99 per bulan), dan Pro menambahkan group chat untuk hingga enam karakter lewat API, yang cocok untuk kelompok companion di VR.

Hadirkan satu karakter di headset

Mulailah dengan NPC yang akan pertama kali ditemui pemain Anda. Bangun di browser, tambahkan Unity SDK, dan dengarkan dia menjawab di headset. Setiap karakter berikutnya mengikuti langkah yang sama.

Detail Meta terakhir diperiksa Oktober 2026.

Pertanyaan yang sering diajukan

Apa itu AI Building Blocks Meta?

Itu adalah komponen Unity di Meta XR SDK untuk object detection, model bahasa, speech-to-text, dan text-to-speech, masing-masing terhubung ke penyedia yang Anda pilih. Neocortex adalah platform karakter yang lengkap, dengan editor visual, suara, dan aksi gameplay dalam satu Unity SDK.

Headset mana yang didukung AI Building Blocks Meta?

Meta merekomendasikan Unity 6 atau lebih baru dengan Quest 3 atau Quest 3S. Karakter Neocortex berjalan di Unity di desktop, mobile, dan web, dan karakter yang sama juga bekerja di Unreal, Godot, dan lewat Web API.

Apakah Meta Llama API masih tersedia untuk aplikasi Quest?

Tidak. Meta telah menghentikan pratinjau Llama API, jadi blok model bahasa membutuhkan penyedia lain seperti OpenAI atau Ollama. Neocortex mengelola model bahasa untuk Anda, jadi tidak ada penyedia yang perlu diganti.

Bisakah NPC VR bereaksi terhadap objek di sekitar pemain?

Tidak secara langsung dengan Building Blocks; integrasi itu harus Anda tulis sendiri. Di Neocortex, game Anda mengirim objek terdekat dan event terbaru, dan karakter membalas dengan aksi seperti membuka pintu atau menyerahkan barang.

Bisakah saya mengkloning suara untuk karakter VR?

Dengan Building Blocks, Anda menghubungkan penyedia TTS dan mengelola suara di sana. Neocortex mencakup kloning suara dari sampel singkat yang Anda punya hak untuk memakainya dan desain suara dari deskripsi teks: 5 suara kustom di Pro dan 20 di Team.

Artikel serupa

Baca juga