新闻 硬件和技术 NVIDIA 向所有开发者开放其 AI 面部动画工具 Audio2Face

NVIDIA 向所有开发者开放其 AI 面部动画工具 Audio2Face

Arkadiy Andrienko
在完整版本中阅读

NVIDIA 决定将其 Audio2Face 技术开源,这一举措将允许任何规模的工作室使用先进的面部动画系统。这使得在不需要传统面部动作捕捉的巨大开支下,创造出更逼真和可信的角色成为可能。

以前,这类工具主要提供给大型游戏公司。现在,即使是小型独立团队也可以轻松将该技术集成到他们的项目中。Audio2Face 将标准音频语音实时转换为逼真的面部动画,将嘴唇动作与对话同步,甚至传达角色的情感——从快乐到惊讶。

开源版本不仅包括核心 SDK,还包括适用于流行游戏引擎(如 Unreal Engine 5 和 Unity)的插件。此外,开发者将获得训练框架和库,内含现成的示例。一个特别有趣的组件是 Audio2Emotion,它分析语音语调以自动确定语音的情感基调,并在角色的脸上反映出来。

首批测试该技术的工作室包括 Codemasters、GSC Game World 和 NetEase。开放访问此类解决方案可能会加速游戏开发,使与非玩家角色(NPC)的互动变得更加自然。这可能意味着木讷的表情和机械的对话将结束,NPC 将以生动的、尽管是 AI 生成的面部表情来回应玩家的话语。

一个重要的说明:该技术是更大 NVIDIA ACE 平台的一部分,专为公司的硬件量身定制。虽然理论上类似的功能可以在其他制造商的 GPU 上运行,但实际上,NVIDIA 可能会专门为其自身设备优化其解决方案。通过开源 Audio2Face,NVIDIA 正在朝着将复杂的 AI 动画变成行业标准而非大预算项目的独占特性迈出重要一步。

    关于作者
    评论0
    留下评论