NVIDIA开源Audio2Face模型及SDK

导语
NVIDIA开源Audio2Face模型及SDK,赋能游戏开发者构建高精度角色动画与实时嘴形同步。免费获取AI驱动工具,加速数字角色创作!

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

【来源:互联网】

17173.com发布此文仅为传递信息,不代表17173.com认同其观点或证实其描述。
尊敬的用户也许你已经注意到了我们文章页面进行了大规模的改造和重构,可以点击提交您的满意度或者想法我们会持续改进,给您提供更好的浏览体验! 一键参与
17173APP

扫描下载APP

游戏礼包一键领取

17173微信公众号

扫描关注公众号

每天更新