Neocortex Logo

SDK Godot Neocortex Sudah Rilis: NPC AI Bersuara untuk Godot 4

SDK Godot open source kami membawa NPC AI ke Godot 4: chat suara, dialog AI dengan emosi, aksi, lip sync, dan percakapan kelompok, dari GDScript.

Neocortex TeamThe team behind Neocortex

· 6 menit baca

SDK Godot open source kami membawa NPC AI ke Godot 4: chat suara, dialog AI dengan emosi, aksi, lip sync, dan percakapan kelompok, dari GDScript.

Godot adalah engine yang paling sering dilewati platform karakter AI. Tidak lagi: SDK Godot kami sudah rilis. Rancang karakter di Neocortex, pasang addon ke proyek Godot 4 Anda, dan pemain bisa berbicara dengannya dengan suara, mendengarnya menjawab dengan suaranya sendiri, dan melihatnya bertindak di dunia Anda.

SDK ini open source, bekerja dari GDScript, dan hadir dengan tujuh scene contoh sehingga Anda bisa melihat semuanya berjalan sebelum membangun sendiri.

Apa yang ditambahkan SDK Godot ke game Anda

  • Karakter yang bisa diajak bicara pemain, dengan mengetik atau bersuara.
  • Suara dan emosi di setiap baris, sehingga animasi dan potret bisa mengikuti suasana hati.
  • Aksi yang menjalankan kode Anda sendiri, seperti membuka pintu atau menyerahkan item.
  • Kesadaran akan scene, sehingga karakter tahu apa yang ada di sekitarnya.
  • Lip sync, percakapan kelompok, dan pembawa kuis.
  • Memori, sehingga percakapan dilanjutkan dari tempat terakhir berhenti.

Cora menjawab pemain di sampel Text Chat

Dialog AI di Godot tanpa pohon dialog

Pohon dialog bercabang rusak begitu pemain bertanya sesuatu yang belum Anda tulis. Dengan Neocortex, Anda merancang karakternya alih-alih setiap baris: kepribadiannya, apa yang ia ketahui tentang dunia Anda, cara bicaranya, dan apa yang boleh ia lakukan. Anda menguji karakter di browser sampai terdengar tepat, lalu memakai karakter yang sama di Godot.

Setiap balasan datang sebagai rangkaian baris, masing-masing dengan emosinya sendiri, sehingga seorang pedagang bisa terdengar senang tentang penjualan dan kesal tentang tawar-menawar dalam satu jawaban yang sama. Karakter juga mengingat percakapan, dan Anda bisa mengirimkan peristiwa gameplay terbaru, seperti "pemain baru saja memenangkan duel", sehingga jawabannya cocok dengan apa yang terjadi. Panduan kami tentang kepribadian NPC yang unik dan memori NPC membahas sisi desainnya lebih dalam.

Chat suara dengan NPC di Godot

Pemain bisa berbicara alih-alih mengetik. SDK merekam mikrofon dengan deteksi suara atau push to talk, mengubah ucapan menjadi teks, dan karakter menjawab dengan suaranya sendiri. Suara mulai diputar selagi sisa balasan masih dibuat, sehingga percakapan tidak terhenti.

Anda memilih cara balasan diberi suara: setiap baris dengan emosinya sendiri, seluruh balasan sebagai satu klip, atau hanya teks. Di Android, SDK meminta izin mikrofon saat dimulai. Postingan kami tentang pipeline suara NPC AI menjelaskan apa yang terjadi antara mikrofon dan speaker.

NPC Godot yang bertindak atas apa yang mereka katakan

Berbicara hanyalah separuhnya. Beri karakter aksi di editor, seperti GIVE_ITEM, OPEN_DOOR, atau FOLLOW_PLAYER, dan hubungkan setiap aksi ke fungsi GDScript:

@onready var agent: NeocortexSmartAgent = $Blacksmith/NeocortexSmartAgent

func _ready() -> void:
	agent.chat_line_started.connect(func(line: NeocortexChatLine): $Subtitle.text = line.text)
	agent.register_action("GIVE_ITEM", _give_item)

func _give_item(action: NeocortexChatAction) -> void:
	inventory.give(action.target_id)  # your own inventory code

Karakter yang bertanya, game Anda yang memutuskan. Tandai objek di scene Anda sebagai interactable, dan karakter tahu apa yang ada di dekatnya dan bisa mengarahkan aksinya ke sana: "pergi ke kotak merah, lalu ke yang biru" menjadi dua aksi, masing-masing dengan target. Satu balasan bisa membawa beberapa aksi, dijalankan satu per satu.

Cora berjalan ke bentuk di lantai pada sampel Interactables

Lip sync, percakapan kelompok, dan kuis

  • Lip sync: mulut karakter bergerak mengikuti kata-katanya dengan blend shape gaya ARKit, standar yang sudah dipakai sebagian besar model karakter.
  • Percakapan kelompok: tempatkan beberapa karakter dalam satu scene, biarkan mereka berbicara dengan pemain dan satu sama lain, dan biarkan mereka bergabung atau pergi selagi percakapan berjalan.
  • Pembawa kuis: karakter menjalankan kuis dari set pertanyaan Anda untuk satu atau lebih pemain, dengan petunjuk, lewati, dan skor yang ditangani untuk Anda.

Cora memandu kuis pada sampel Quiz Show

Cara menambahkan NPC AI ke Godot 4

  1. Unduh rilis terbaru dan salin addons/neocortex-godot-sdk ke proyek Anda.
  2. Aktifkan Neocortex di Project Settings > Plugins, dan tempelkan API key Anda di dock Neocortex.
  3. Pilih Project > Tools > Neocortex > Complete Voice Chat, pilih karakter Anda, dan tekan Play.

Quick start Godot memuat detailnya, dan tutorial kami tentang menambahkan dialog NPC AI di Godot 4 membangun scene pandai besi lengkap langkah demi langkah.

SDK Godot atau integrasi LLM Anda sendiri?

Anda bisa mengirim teks ke API LLM dengan node HTTPRequest Godot dan mencetak jawabannya. Itu prototipe akhir pekan yang bagus. Karakter yang akan dihabiskan pemain berjam-jam membutuhkan lebih: pengenalan suara, suara untuk setiap karakter, emosi, memori lintas sesi, aksi yang bisa dipercaya game Anda, dan batasan agar satu pemain tidak bisa membuat tagihan Anda membengkak.

SDK ini mencakup semua itu, dan batas penggunaan per pemain dan per karakter pada setiap API key diberlakukan di server kami. Untuk gambaran lebih luas tentang opsinya, lihat ulasan kami tentang tool NPC AI untuk Godot.

Open source

SDK ini ada di GitHub di bawah Apache 2.0, jadi issue dan pull request sangat diterima. Karakter yang sama juga bisa berjalan di Unity, Unreal Engine dan web, sehingga karakter yang Anda rancang untuk game Godot bisa ikut ke proyek berikutnya.

Beri tahu kami apa yang dibutuhkan game Godot Anda selanjutnya di Discord kami.

Pertanyaan yang sering diajukan

Adakah plugin NPC AI untuk Godot?

Ada. SDK Godot Neocortex adalah plugin editor open source untuk Godot 4.7 dan yang lebih baru. Ia menambahkan karakter AI bersuara dengan emosi, aksi, lip sync, percakapan kelompok, dan kuis ke proyek Anda.

Bagaimana cara menambahkan dialog AI ke NPC di Godot?

Rancang karakter di Neocortex, tambahkan SDK Godot ke folder addons proyek Anda, aktifkan plugin, dan tempelkan API key Anda. Lalu tambahkan scene chat dari Project > Tools > Neocortex, atau panggil text_to_audio pada NeocortexSmartAgent dari GDScript.

Bisakah saya memakai ChatGPT atau LLM lain untuk NPC Godot?

Anda bisa memanggil API LLM sendiri dengan node HTTPRequest Godot, tetapi Anda kemudian membangun suara, emosi, memori, dan aksi di atasnya. SDK Godot Neocortex memberi Anda semua itu dalam satu addon, dengan karakter yang Anda rancang di editor visual.

Bisakah pemain berbicara dengan NPC Godot menggunakan suara mereka?

Bisa. Pemain berbicara ke mikrofon, dengan deteksi suara atau push to talk, dan karakter menjawab dengan suaranya sendiri dengan emosi di setiap baris.

Apakah SDK Godot mendukung lip sync?

Ya. NeocortexFaceAnimator menggerakkan blend shape mulut gaya ARKit pada mesh karakter Anda saat ia berbicara.

Bisakah NPC AI di Godot memicu gameplay?

Bisa. Beri karakter aksi seperti GIVE_ITEM atau OPEN_DOOR, dan setiap aksi memanggil fungsi GDScript yang Anda daftarkan. Aksi bisa menargetkan objek di scene, dan kode Anda yang memutuskan apakah aksi itu dijalankan.

Versi Godot apa yang didukung SDK?

Godot 4.7 atau lebih baru.

Apakah SDK Godot Neocortex open source?

Ya. Ia ada di GitHub dengan lisensi Apache 2.0.

Baca juga