Neocortex Logo

Rezydenci AI dla światów metaverse, które wyglądają na żywe

Buduj rezydentów AI dla światów metaverse z Neocortex: witających w przeglądarce, baristów i DJ-ów, którzy rozmawiają między sobą i reagują, gdy pojawi się ktoś nowy.

Neocortex TeamThe team behind Neocortex

· 6 min czytania

Buduj rezydentów AI dla światów metaverse z Neocortex: witających w przeglądarce, baristów i DJ-ów, którzy rozmawiają między sobą i reagują, gdy pojawi się ktoś nowy.

Większość wspólnych światów jest tak ożywiona, jak liczba zalogowanych osób, więc gość, który przychodzi o cichej porze, przechodzi przez pusty plac i wychodzi. Neocortex pozwala wypełnić ten plac rezydentami AI, którzy rozmawiają między sobą, zauważają, że pojawił się ktoś nowy, i odpowiadają każdemu, kto się do nich odezwie. Świat ma puls, nawet gdy liczba serwerów jest niska.

Jak to wygląda

Lantern Quay to oryginalny świat w przeglądarce: portowy plac o stałym zmierzchu, obwieszony papierowymi lampionami, gdzie ludzie spotykają się, zanim ruszą do galerii i pokojów z grami wokół. Na krawędzi wody stoi Drift Café, kiosk prowadzony przez Wren, baristkę, która zna zamówienie każdego i udaje, że nie zna. Tuż obok, za barem Tidewater, pracuje Teodor, suchy i niespieszny, który uważa, że kawa po szóstej to moralna porażka.

Gość o imieniu Kai schodzi z promu. Nikt jeszcze do niego nie mówi, ale świat wysyła zdarzenie, że przybył nowy gość, a następna tura ambient je podejmuje:

Wren: Nowa twarz na nabrzeżu. Dziesięć monet, że zamówi flat white. Teodor: Dziesięć monet, że ma rozum, żeby przyjść tutaj. Wren: Cześć! Nie słuchaj go, od świtu poleruje tę samą szklankę.

Kai się śmieje i pyta Wren, co jest dobre. Ona odpowiada mu bezpośrednio, a jej odpowiedź niesie akcję SERVE_DRINK skierowaną do awatara Kaia, którą świat odgrywa jako kubek przesuwający się po blacie. Dziesięć minut później prom znów przybija i gra dodaje do obsady kapitana Henryka, sternika promu. Teodor nalewa mu jego zwykłe bez pytania. Wren chce wiedzieć, czy nadciąga mgła.

Gdy Kai się wyloguje, rozmowa zachowuje swój wątek. Następny gość zastaje Wren i Teodora wciąż kłócących się o zakład.

Jak Neocortex to robi

  • Czat grupowy łączy do sześciu rezydentów w jednej rozmowie (plany Pro i Team), każdy z własną osobowością, głosem i wiedzą.
  • Tury ambient to żądania czatu grupowego bez wiadomości message od gościa. Rezydenci rozmawiają między sobą, a odpowiedź zawiera każdą kwestię, osobę, która ją wypowiedziała, i emocję.
  • Reżyser AI wybiera następnego mówiącego. Gdy scena wymaga konkretnego rezydenta, na przykład kapitana ogłaszającego odpływ, wymuś go przez speakerCharacterId.
  • Dynamiczna obsada podąża za listą postaci, które wysyłasz. Dodaj kapitana Henryka, a pozostali go przywitają; usuń go, gdy prom odpłynie, a wspomną, że go nie ma.
  • Zdarzenia niosą to, co się właśnie wydarzyło w świecie: przybył nowy gość, zaczęły się fajerwerki, galeria otworzyła nową wystawę. Rezydenci rozmawiają o tym świecie zamiast popadać w drobnostki.
  • Akcje jadą razem z kwestiami, więc Wren może podać drinka, a Teodor przygasić światła baru, mówiąc.
  • Pamięć sesji. Zachowaj zwrócony sessionId dla każdego miejsca w świecie i wysyłaj go z każdą turą, aby rozmowa w kawiarni trwała przez kolejnych gości.
  • Głosy i zamiana mowy na tekst. Każda kwestia płynie strumieniem głosem danego rezydenta. Goście mówią przez mikrofon Unity WebGL (po HTTPS) albo przez własne przechwytywanie mikrofonu wysyłane do zamiany mowy na tekst Neocortex.
  • Kontrola zużycia. Wysyłaj playerId z każdą wiadomością gościa, a limity na gracza utrzymają koszty tętniącego życiem świata w przewidywalnych granicach.

Pomysły do zbudowania

Klub nocny z gospodarzem-DJ-em. Postać DJ-a zapowiada każdy utwór, przekomarza się z bramkarzem w ciszy między utworami i zwraca akcję CHANGE_TRACK, gdy gość krzyknie prośbę. Wyślij zdarzenie, gdy parkiet się zapełni, a DJ rozgrzeje tłum; wymuś DJ-a jako mówiącego, gdy zacznie się główny set.

Fantasy miasteczko w przeglądarkowym MMO. Kowal, zielarka i herold miejski dzielą plac. Między wizytami graczy tury ambient pozwalają im plotkować o rajdzie, który wczoraj się nie udał, zasilane prawdziwymi zdarzeniami z Twojego serwera. Gracz, który zostanie dłużej, dowiaduje się, który loch jest wart wyprawy.

Świat marki. Marka odzieży sportowej buduje dachowe boisko w przeglądarce. Dwóch rezydentów, trener i kolekcjoner sneakersów, rozmawia o nowym modelu w turach ambient i odpowiada na pytania z bazy wiedzy o produktach. Gdy trener wspomni o bucie, akcja otwiera jego model 3D dla gościa.

Zebranie mieszkańców. W małym wspólnym świecie pozwól gościowi playAs przyjąć personę, nowego lokatora na zebraniu mieszkańców, tak by pozostali zwracali się do niego po tej roli, a grupa kłóci się o zepsutą windę.

Budowanie

Komponent Unity SDK obsługuje buildy WebGL i opakowuje tury ambient w komponent reżysera grupy z wywołaniem Continue(). Światy zbudowane na innym stosie webowym wywołują Web API bezpośrednio, najlepiej z własnego serwera.

  1. Stwórz rezydentów w wizualnym edytorze Neocortex: osobowość, historię, to, co wiedzą o świecie i o sobie nawzajem, głos i akcje, które mogą zwrócić.
  2. Przećwicz w panelu za pomocą przycisków "Start scene" i "Continue" w podglądzie grupy, aż dynamika między nimi będzie wyglądać dobrze.
  3. Daj każdemu miejscu w swoim świecie własną sesję. Kawiarnia, bar i nabrzeże mają swój sessionId.
  4. Żądaj tur ambient, gdy gość wejdzie w obszar albo co jakiś czas, z zdarzeniami o wszystkim, co się właśnie stało.
  5. Odtwarzaj kwestie i wykonuj akcje na ekranie każdego gościa, tak by wszyscy w pobliżu słyszeli tę samą rozmowę.
  6. Kieruj mowę gościa do tej samej sesji i zmieniaj obsadę, gdy rezydenci przychodzą i odchodzą.

Tura ambient z kawiarni, zaraz po dodaniu kapitana:

const res = await fetch("https://api.neocortex.link/v3/chat", {
  method: "POST",
  headers: {
    "x-api-key": apiKey, // from your own server config, never hard-coded
    "Content-Type": "application/json",
  },
  body: JSON.stringify({
    characterIds: [wren, teodor, henrik], // Henrik just stepped off the ferry
    sessionId: cafeSession,               // one session per spot in the world
    maxTurns: 2,
    events: [{ priority: 1, content: "A visitor called Kai has just arrived on the dock" }],
    // no "message": the residents talk among themselves
  }),
});
const { sessionId, messages } = await res.json();
broadcastLines(messages); // your own helper: voices and chat bubbles for everyone nearby

Wysyłaj żądanie z serwera, a nie z przeglądarki, aby klucz API nigdy nie trafił do gości, i rozkładaj tury w czasie. Dwóch rezydentów wymieniających kilka zdań, gdy ktoś przechodzi, wygląda jak życie; nieustanny strumień wygląda jak radio, którego nikt nie może wyłączyć.

Rezydenci w świecie metaverse to jeden z przykładów z naszego zestawienia zastosowań AI NPC, ambient AI i komend głosowych. Stronę gry tego pomysłu opisujemy w rozmowach ambient NPC, a na zorganizowane spotkania przeczytaj gospodarzy AI na wydarzenia wirtualne. Szczegóły przeglądarkowe są w AI NPC dla gier WebGL i przeglądarkowych, a strona postaci dynamicznych i dokumentacja czatu grupowego pokrywają resztę. Zacznij od dwóch rezydentów przy jednym blacie i zobacz, z kim rozmawiają goście.

Sprawdzono w październiku 2026 roku.

Najczęstsze pytania

Jak sprawić, by świat metaverse wydawał się żywy, gdy online jest niewielu użytkowników?

Daj mu rezydentów AI. Dzięki czatowi grupowemu Neocortex kilka postaci rozmawia między sobą w turach ambient, reaguje na zdarzenia w świecie i odpowiada gościom, którzy się do nich odezwą, więc cichy plac wciąż ma w sobie rozmowę.

Czy rezydenci AI mogą rozmawiać ze sobą w świecie przeglądarkowym?

Tak. Czat grupowy Neocortex łączy do sześciu postaci w jednej rozmowie w planach Pro i Team. Żądanie bez wiadomości od gościa prosi je o kontynuowanie rozmowy między sobą, a działa z dowolnego stosu webowego przez Web API.

Czy rezydenci AI zauważają, gdy ktoś dołącza do sceny?

Tak. Dodaj postać do obsady, a pozostałe ją przywitają; usuń ją, a zauważą odejście. Przybycie gości można wysłać jako zdarzenia, dzięki czemu rezydenci witają nowo przybyłych na swój sposób.

Czy goście mogą rozmawiać z rezydentami AI głosem?

Tak. Rezydenci odpowiadają strumieniowanymi głosami, a goście mogą mówić przez mikrofon Unity WebGL po HTTPS albo przez własne przechwytywanie mikrofonu wysyłane do zamiany mowy na tekst Neocortex.

Podobne artykuły

Czytaj dalej