VR'da Sesli Komutlar: Meta Quest'te Elsiz Kontrol
Neocortex ile VR'da sesli komutlar ekleyin: araçları değiştirmek, menüleri açmak ve eğitimi çalıştırmak için Meta Quest kulaklığında çevrimdışı kontrol, bir yapay zeka eğitmeni ile birlikte.
Neocortex TeamThe team behind Neocortex
· 6 dk okuma

VR'da oyuncunun elleri kumandasının kendisidir: biri anahtarı tutar, diğeri feneri; bir bilek menüsüne uzanmak ise ellerden birini bırakmak demektir. Neocortex Voice Commands, oyuncunun ikisini de elinde tutmasını sağlar: "simülasyonu duraklat" ya da "basınç göstergesine geç" derler ve komut doğrudan Meta Quest kulaklığında, çevrimdışı olarak tanınır. Bir yapay zeka eğitmeni karakteri ekleyin; senaryoyu çalıştıran aynı ses, basıncın neden az önce fırladığını da sorabilir.
Nasıl göründüğü
Halvard Station, kurgusal bir açık deniz pompalama platformunda bakım teknisyenleri için özgün bir VR eğitim simülasyonudur. Bugünkü senaryo: pompa odası ikide sızdıran bir flanş. Eğitim görenler, sol elinde bir el feneri, sağ elinde bir tork anahtarıyla bir boru hattının altında çömelmiş, bir cıvatanın üzerine oturmuş durumda.
İkisini de bırakmadan şunları söylerler:
"Bana izolasyon vanasını göster."
Uzak duvardaki bir çark vananın etrafında yumuşak bir kontur belirir. Sonra: "Simülasyonu duraklat ve basınç göstergesine geç." Sızıntının tısıltısı püskürtme ortasında durur ve sağ eldeki anahtar, el tipi bir göstergeye dönüşür. "Devam et." Sızıntı yeniden başlar. "Kontrol odasını ara" dendiğinde, bir telsiz operatörü eğitim görenin kanalından yanıt verir.
Okunan değer, eğitim görenin beklediğinden yüksektir. Bu bir komut değil, bir sorudur; bu yüzden eğitmen olan, Başmühendis Odile Varga adlı yapay zeka karakterine gider:
Eğitim gören: Bu cıvatayı gevşetince neden basınç fırladı? Odile: Çünkü hat hâlâ canlı. Tahliye vanasını atladın. Cıvatayı tekrar sıkın, hattı tahliye edin, sonra yeniden deneyin.
Odile, eğitim görenin bir adımı atladığını, senaryonun bunu bir olay olarak göndermesi sayesinde bilir. Prosedürün kendisi, istasyonun bakım kılavuzundan yüklenen bilgi tabanında durur. Yanıtı ayrıca tahliye vanası üzerinde bir vurgulama eylemi taşır; böylece eğitim gören tam olarak nereye bakacağını bilir.
Neocortex bunu nasıl sağlıyor
- Kulaklıkta, çevrimdışı. Konuşma tanıma ve komut eşleştirme Quest üzerinde çalışır. Komutlar Wi-Fi'nin zayıf olduğu bir eğitim odasında da çalışmaya devam eder ve hiçbir ses kulaklığı terk etmez.
- Eller görevde kalır. Menüler, araç değişimleri, senaryo kontrolleri ve ekip arkadaşlarına çağrılar sese taşınır; oyuncunun tuttuğu şeyi bırakması gerekmez.
- Doğal ifade. "Duraklat", "simülasyonu dondur" ve "simülasyonu durdur" hepsi aynı eylemi tetikleyebilir. Eğitim görenler bir el kitapçığındaki bir cümleyi değil, baskı altında doğal olarak ne geliyorsa onu söyler.
- Tek cümlede birden fazla eylem. "Simülasyonu duraklat ve basınç göstergesine geç" iki komut olarak işlenir.
- Bağlam. "Tahliye vanasını göster. Şimdi aç." cümlesindeki "onu", az önce vurgulanan vanaya çözümlenir.
- Bas-konuş ya da sürekli dinleme. Bir parmağınız boşsa, bir tutma ya da yüz düğmesi bas-konuş olarak çalışabilir. Her iki elin de sürekli meşgul olduğu eğitimlerde sürekli dinleme genellikle daha uygundur.
- Aktör, eylem ve nesnelerden oluşan komut setleri. Neocortex panelinde tasarlanır: ekip arkadaşları ve kontrol odası aktör; duraklat, göster, değiştir ve ara eylem; vanalar, araçlar ve odalar nesne olarak.
- Birden fazla dil. Dil başına bir komut seti; böylece ekipler çalıştıkları dilde eğitim alabilir.
Odile, görsel düğüm editöründe kurulmuş bir Neocortex yapay zeka karakteridir; kişiliği, akış halinde ses ve her satırda duygu etiketleri vardır. Bilgi tabanı PDF ya da TXT yüklemelerini kabul eder (Starter'da 5, Pro'da 20, Team'de 100). Senaryonuz "eğitim gören boru hattını tahliye etmeden flanşı açtı" gibi olaylar gönderir; o da sizin tanımladığınız eylemleri döndürür, örneğin bir parçayı vurgulamak; uygulamanızın aydınlatması gereken hedefle birlikte. Özel bir eğitmen sesi Pro'da (5 özel ses) ve Team'de (20) mevcuttur.
Kurulacak fikirler
Bir VR nişancı ekibi. Tüfeği iki elle doğrultan oyuncu şöyle seslenir: "Mara, avluyu dumanla kapat. Jensen, sol kapıyı al." Her ekip arkadaşı bir aktördür; böylece emirler temiz biçimde ayrılır ve oyuncu bir durum raporu istediğinde her biri kendi sesiyle yanıt verebilen bir yapay zeka karakteri olabilir.
Bir VR yapı aracı. Yaratıcı bir uygulamada eller şekil verir ve yerleştirir, ses ise araç çubuğunu yönetir: "fırçaya geç", "bunu iki kat büyüt", "bunu çoğalt", "geri al". Kimse bir fırçalama sırasında yüzen bir paletin içinde kazmak zorunda kalmaz ve iş gözünün önünde kalır.
Bir VR bulmaca odası. Oyuncular bir elinde fener, diğerinde bir kol tutarken odayı çözer: "köprüyü indir", "sol aynayı döndür". Hatırlatma istendiğinde ipucu veren bir yapay zeka karakteriyle eşleştirin; oyuncunun durumuna göre oda cömert ya da cimri olabilir.
Eğitmenler için senaryo kontrolü. Daha uzun bir eğitim programında ses, eğitim görenin kulaklıktan çıkmadan tatbikatı sıfırlamasına ve değiştirmesine izin verir: "sızıntıdan yeniden başlat", "alarm açıkken bir daha çalıştır". Senaryo, bir oturumda iki kez değil on kez tekrar edilebilen bir şeye dönüşür.
Nasıl kurulur
Neocortex Voice Commands, VR uygulamanızın içinde Meta Quest kulaklığında çalışır. Eğitmen gibi yapay zeka karakterleri Neocortex API'si üzerinden bağlanır; açık kaynaklı VR demomuz ise yapay zeka karakterleri olan, başlangıç için hazır bir Quest projesidir.
- Ellerin dolu olduğu anları bulun. Deneyiminizde gezin ve her araç değişimini, menüyü, duraklatmayı ve yardım çağrısını işaretleyin. Bunlar komutlarınız olur.
- Neocortex panelinde bir komut seti tasarlayın: ekip arkadaşlarını ve istasyonları aktör, fiili eylem, sahnedeki ekipman ve yerleri nesne olarak, her biri için birkaç örnek ifadeyle.
- Neocortex Voice Commands'ı Quest derlemenize ekleyin ve eşleşen her komutu senaryo kontrolcünüze ve araç sisteminize bağlayın.
- Ellere uygun bir dinleme modu seçin: iki elin de sürekli meşgul olduğu tatbikatlarda sürekli dinleme, çok konuşmanın olduğu oyunlarda ise bir tutma düğmesinde bas-konuş.
- Yapay zeka eğitmenini ekleyin: kişiliği, sesi, prosedürlerinizin bilgi tabanı ve ekipman vurgulamak için eylemleri olan bir Neocortex karakteri. Her soruyla birlikte senaryo olaylarını gönderin; böylece yanıtlar eğitim görenin gerçekte ne yaptığını izler.
- Eğitim görenlerin ya da oyuncuların konuştuğu her dil için bir komut seti ekleyin.
Her komuta kulaklıkta küçük bir onay verin; yumuşak bir çın sesi ya da bilek yakınında kısa bir etiket gibi. Bakılacak bir ekran kenarı olmadığında oyuncuların duyulduklarını bilmesi gerekir. Bilek menüsünü de elle erişilebilir tutun; konuşmaktansa uzanmayı tercih edenler için.
Voice Commands lisanslı bir SDK'dır: Voice Commands lisansı için bizimle iletişime geçin. Eğitmen ve diğer yapay zeka karakterleri, arkasındaki API ile birlikte her planda yer alır.
Elsiz VR, yapay zeka NPC'si, ortam yapay zekası ve sesli komut kullanım örnekleri listemizde bir maddedir. Kulaklıklar hakkında daha fazlası için yapay zeka ile VR soft skill eğitimi ve VR kaçış odaları için yapay zeka karakterleri yazılarını okuyun ve VR deneyimleri sayfasına bakın. Tek bir araç değişimi ve tek bir duraklatma komutuyla başlayın; eğitim görenlerin menüye ne kadar çabuk uzanmayı bıraktığını izleyin.
Ekim 2026'da kontrol edildi.
Sık sorulan sorular
Bir Meta Quest uygulamasında sesli komutları kullanabilir miyim?
Evet. Neocortex Voice Commands, Meta Quest kulaklığının kendisinde çalışır; böylece oyuncular elleri kumandalarda kalırken sesle menüleri açabilir, araçları değiştirebilir ve bir senaryoyu kontrol edebilir.
VR sesli komutları internet bağlantısı gerektirir mi?
Hayır. Neocortex Voice Commands konuşmayı kulaklıkta, çevrimdışı olarak tanır ve eşleştirir; hiçbir ses cihazdan çıkmaz. Yalnızca bir yapay zeka karakteri eklerseniz, o Neocortex API'sini kullanır.
Sesli komutlarla bir VR eğitim simülasyonunu kontrol edebilir miyim?
Evet. "Simülasyonu duraklat" ya da "vanayı göster" gibi komutlar, eğitim uygulamanızın çalıştırdığı eylemler ve nesneler olarak gelir; bir Neocortex yapay zeka eğitmen karakteri ise prosedürle ilgili daha uzun soruları yanıtlayabilir.
Bir VR uygulamasına yapay zeka eğitmeni nasıl eklerim?
Eğitmenin kişiliği, sesi ve prosedürlerinizin bilgi tabanıyla bir Neocortex yapay zeka karakteri oluşturun; sonra her soruyla birlikte senaryo olaylarını gönderin. Açık kaynaklı Meta Quest demomuz, bir VR projesinin yapay zeka karakterleriyle nasıl konuştuğunu gösterir.






