Byl zahájen Unreal Fest Seattle 2024 a společnost NVIDIA u této příležitosti oznamuje vydání nových pluginů pro NVIDIA ACE v Unreal Enginu 5. Zjednodušují tvorbu a nasazení MetaHuman, postav využívajících AI na PC se systémem Windows.
Shrnutí klíčových informací:
Nové pluginy v Unreal Engine 5 po NVIDIA ACE:
- Audio2Face-3D Plugin: Umožňuje díky AI synchronizaci rtů a animaci obličeje na základě zvukové stopy řeči přímo v Unreal Engine 5.
- Nemotron-Mini 4B Instruct Plugin: Zajišťuje generování odpovědí pro interaktivní dialogy postav.
- RAG (Retrieval Augmented Generation) Plugin: Dodává kontextové informace pro vylepšení interakce postav.
Audio2Face-3D Plugin pro Autodesk Maya:
- Usnadňuje tvorbu věrných, zvukem řízených animací obličeje v aplikaci Maya.
- Obsahuje zdrojový kód pro přizpůsobení a integraci s dalšími nástroji pro tvorbu digitálního obsahu.
- Zjednodušuje spolupráci mezi aplikacemi Maya a Unreal Engine 5.
Unreal Engine 5 Renderer Microservice s funkcí Pixel Streaming:
- Využívá technologii Unreal Pixel Streaming společnosti Epic.
- Nyní v předběžném přístupu podporuje mikroslužbu NVIDIA ACE Animation Graph a operační systém Linux.
- Umožňuje vývojářům streamovat vysoce věrné MetaHuman postavy do libovolného zařízení prostřednictvím webové komunikace v reálném čase (WebRTC).
Výhody pro vývojáře:
- Zjednodušuje integraci digitálních lidí využívajících AI do her a aplikací.
- Optimalizuje mikroslužby pro nízkou latenci a minimální využití paměti na počítačích se systémem Windows.
- Zvyšuje škálovatelnost pro cloudové nasazení digitálních lidí.
- Poskytuje přizpůsobitelné nástroje a zdrojový kód pro potřeby vývoje na míru.
Vývojáři budou moci požádat o předčasný přístup, aby si mohli stáhnout Unreal Engine 5 Renderer Microservice s podporou Animation Graph a operačního systému Linux. Plugin Maya ACE je k dispozici ke stažení na serveru GitHub.
Blog s podrobnostmi: https://