NVIDIA atver durvis spēļu izstrādātājiem ar jaudīgu AI sejas animācijas rīku
Informatīvā ziņa no tehnoloģiju giganta NVIDIA raisa patiesu sajūsmu spēļu izstrādes pasaulē. Uzņēmums ir paziņojis, ka tā revolucionārā Audio2Face tehnoloģija tagad ir pieejama izstrādātājiem ar atvērtā pirmkoda licenci. Tas nozīmē, ka spēļu veidotāji var izmantot šo mākslīgā intelekta (MI) jaudu, lai atdzīvinātu savus 3D varoņus vēl nebijušā veidā.
MI rada reālistiskas emocijas un sinhronizē lūpas
Audio2Face pamatā ir spēja analizēt audio signālus, precīzi izprast fonēmas, intonāciju un pat emocionālo toni, ko pārraida balss. Balstoties uz šo analīzi, MI instruments spēj reāllaikā radīt dinamiskas sejas animācijas, tostarp neticami precīzu lūpu sinhronizāciju ar runu. Iedomājieties, cik tas padara varoņu izteiksmes bagātākas un patiesi dzīvas! Šī tehnoloģija spēj ģenerēt datus, kas ļauj 3D modelim atveidot smalkākās cilvēka emociju nianses, padarot spēļu pasaules daudz ticamākas.
Plaša pieejamība un pielāgošanas iespējas
Lai integrācija ar esošajiem darba procesiem būtu pēc iespējas vienmērīgāka, NVIDIA nodrošina atbalstu populārākajiem rīkiem, piemēram, Autodesk Maya un Unreal Engine 5. Papildus tam tiek piedāvāts arī SDK (Software Development Kit), apmācību platforma un sagatavoti datu kopu piemēri. Tas nozīmē, ka izstrādātājiem ir ne tikai iespaidīgs rīks pie rokas, bet arī visas nepieciešamās iespējas, lai to pilnveidotu vai pielāgotu savām unikālajām vajadzībām. Pieejamie modeļi ietver gan klasiskus regresijas, gan modernākus difūzijas variantus lūpu sinhronizācijai, kā arī atsevišķu Audio2Emotion tīklu, kas ir apmācīts atpazīt un atveidot emocijas, balstoties uz balss analīzi.
Sadarbība ar industrijas līderiem un nākotnes vīzija
Jau šobrīd vairākas vadošās spēļu studijas aktīvi izmanto šo novatorisko tehnoloģiju. NVIDIA partneru vidū ir tādi pazīstami vārdi kā Codemasters, GSC Game World, NetEase, Perfect World, Convai, Inworld AI, Reallusion, Streamlabs un UneeQ. Spēja apiet sarežģīto un laikietilpīgo tradicionālās kustību tveršanas (motion capture) procesu padara Audio2Face par ārkārtīgi pievilcīgu risinājumu studijām, kuras tiecas paātrināt savu ražošanas ciklu, nezaudējot kvalitāti.
NVIDIA pozicionē Audio2Face kā būtisku sastāvdaļu plašākā MI-balstīto RTX Kit rīku komplektā, kas paredzēts izstrādātājiem. Šis komplekts ietver arī SDK neironu tekstūru saspiešanai un globālajam apgaismojumam. Izlaižot šo tehnoloģiju zem atvērtā pirmkoda licences, NVIDIA mērķtiecīgi aicina plašu kopienu – izstrādātājus, pētniekus un studentus – ne tikai izmantot, bet arī pilnveidot un paplašināt tās pielietojuma iespējas, sniedzot tai jaunas perspektīvas ne tikai spēļu industrijā, bet arī daudz plašākā IT nozarē.