NVIDIA通过全新ACE插件和微服务简化AI驱动的MetaHuman部署

Unreal Fest Seattle 2024 于北京时间2024年10月2日拉开帷幕,NVIDIA宣布在虚幻引擎 5 中为NVIDIA ACE发布新的设备端插件,从而简化在Windows PC上创建和部署AI驱动的MetaHuman角色的过程。点击完整Blog了解详情。

主要亮点:

全新虚幻引擎 5 ACE插件:

Audio2Face-3D插件:在虚幻引擎 5中直接开启AI驱动的口型同步和面部动画。

Nemotron-Mini 4B Instruct插件: 为交互式角色对话提供响应生成功能。

检索增强生成(RAG)插件: 提供上下文信息以增强角色互动。

用于Autodesk Maya的Audio2Face-3D插件:

便于在Maya中制作高质量、音频驱动的面部动画。

包括用于自定义与和其他数字内容创建工具集成的源代码。

简化Maya和虚幻引擎 5之间的工作流。

采用像素流送的虚幻引擎 5渲染器微服务:

采用Epic的虚幻引擎像素流送(Unreal Pixel Streaming)技术。

现已支持NVIDIA ACE Animation Graph微服务和Linux操作系统的抢先体验。

允许开发者通过网络实时通信(WebRTC)将高保真MetaHuman角色流式传输到任何设备。

为开发者带来的益处:

简化AI驱动的数字人集成到游戏和应用中的过程。

在Windows PC上优化微服务以实现低延迟和最小显存占用。

增强数字人基于云部署的可扩展性。

提供可定制的工具和源代码,以满足定制开发需求。

开发者可申请提前下载虚幻引擎 5渲染器微服务,该服务支持Animation Graph微服务和Linux操作系统。Maya ACE插件可在GitHub下载。

如果玩家对新闻报道有任何疑问,请联系NIVDIA。

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。