Новини›Ytterligare›ElevenAgents Unity SDK дава глас на NPC героите в Unity игри
Ytterligare

ElevenAgents Unity SDK дава глас на NPC героите в Unity игри

ElevenLabs · четвъртък, 5 ноември, 22:44 · 1 мин четене

Играчите могат да говорят на глас с персонажи в сцената, а SDK-то работи в Editor, desktop, WebGL и

Новият ElevenAgents Unity SDK свързва сцената ти в Unity със съвременен гласов агент на ElevenLabs. Играчът може да се приближи до персонаж и да му говори на глас. SDK-то слуша през микрофона на играча, пуска гласа на агента през AudioSource и управлява сесията през Conversation API.

Един и същ код работи в Editor, в desktop билдове и в WebGL. Поддръжката за iOS, Android и XR е в бета.

За старт ти трябва ID на агент, който си създал в таблото на ElevenLabs. В агента се задават промптът и гласът. В примерния проект GettingStarted колайдър около персонажа отваря сесията, когато играчът влезе в зоната, и я затваря, когато излезе. StartSessionAsync връща управлението след като връзката е готова и аудио устройствата работят.

По подразбиране гласът се пуска в 2D. Ако подадеш собствен AudioSource като OutputAudioSource, гласът идва от самия персонаж. GetOutputVolume връща нивото на гласа от 0 до 1, така че можеш да движиш уста или друг елемент според говора.

Динамичните променливи попълват места като {{mood}} в промпта и първото съобщение на агента. Така няколко персонажа могат да използват един агент с различни стойности при старта на сесията. Освен това може да пращаш събития от играта с SendContextualUpdate, без да прекъсваш агента. Client tools позволяват на агента да извиква код в играта, например да отваря врата, като регистрираш обработчик под същото име.

Преди публикуване включи Authentication. Сървърът ти тогава иска кратковременен подписан URL, който играта подава като SignedUrl. API ключът на ElevenLabs никога не трябва да се слага в билда на играта.

Ръководството за начало отнема около 10 минути и завършва с кубче, което те поздравява, когато се приближиш.

Още новини