MetaHuman bazat pe AI cu noul plugin ACE și Microservicii

Unreal Fest Seattle 2024 a început aseara, iar NVIDIA a anunțat lansarea de noi plugin-uri pentru NVIDIA ACE în Unreal Engine 5 care vor facilita crearea și lansarea MetaHuman bazat pe AI pe PC-urile Windows.

 

Noi plugin-uri ACE pentru Unreal Engine 5:

  • Audio2Face – 3D Plugin: Permite sincronizarea buzelor și a animațiilor faciale cu discursul prin intermediul inteligenței artificiale direct în Unreal Engine 5
  • Nemotron-Mini 4B Instruct Plugin: Oferă generare de răspunsuri pentru dialoguri interactive cu personaje
  • Retrieval Augmented Generation (RAG) Plugin: Oferă informații contextuale pentru a îmbunătăți interacțiunile cu personaje

 

Plugin Audio2Face pentru Autodesk Maya:

  • Facilitează animații faciale de înaltă calitate și bazate pe audio în Maya
  • Include codul sursă pentru customizarea și integrarea cu alte unelte digitale pentru creare de conținut
  • Facilitează fluxul de lucru între Maya și Unreal Engine 5

 

Microserviciul Unreal Engine 5 Renderer cu Pixel Streaming:

  • Folosește tehnologia Unreal Pixel Streaming de la Epic
  • Are acum suport pentru microserviciul NVIDIA ACE Animation Graph și Linux OS în early access
  • Permite dezvoltatorilor să facă streaming de înaltă calitate a personajelor MetaHuman către orice dispozitiv prin intermediul Web Real-Time Communication (WebRTC)

 

Beneficii pentru dezvoltatori:

  • Simplifică integrarea de persoane digitale alimentate de AI în jocuri și aplicații
  • Optimizează microserviciile pentru latență scăzută și utilizare minima de memorie pe PC-urile Windows.
  • Îmbunătățește scalabilitatea pentru lansare în cloud a persoanelor digitale.
  • Oferă unelte de personalizare și codul sursă pentru nevoile specializate de dezvoltare.

 

Dezvoltatorii vor putea să aplice pentru early access astfel încât să descarce microserviciul Unreal Engine 5 renderer cu suport pentru microserviciul Animation Graph și Linux OS. Plugin-un Maya ACE este disponibil pentru descărcare pe GitHub.

Views: 9

Lasă un răspuns