NVIDIA的Audio2Face的开放资源模型,可用于在AI中实
发布时间:2025-09-27 09:34
[全球网络技术综合报告] 9月25日,NVIDIA今天宣布了开放的资源生成AI面部动画模型Audio2Face。开放的资源内容不仅包括模型本身,还涵盖了软件开发工具包(SDK)和完整的培训框架。该提案旨在将新的活力附加到游戏领域,3D应用程序,加快发展AI智能虚拟特征的过程,并促进升级相关行业。作为高级AI技术,Audio2Face具有强大的性能功能。它可以准确地研究音频中的主要声学特征,例如音素和音调,并在此基础上实时推动虚拟特征的面部运动,这不仅可以实现准确的唇部和音频形状和音频形状,还形成了自然和有序的情感表达。为此,这项技术在许多领域都显示出广泛的应用前景。除了发展游戏,它还可以提供电影制作,电视,客户服务和其他情况,从而为工业发展提供新的技术支持。 在操作模式方面,Audio2Face显示出高灵活性,并支持两种基本操作模式。第一个是离线预录的音频渲染模式,适用于需要高动画精度并且不需要实时反馈的场景,例如制作六个和制作电视动画;其次是动态字符AI流式传输处理的实时模式,它可以铺设需要严格的响应速度,例如游戏,实时交互式虚拟客户服务,并确保在与用户接触时始终保持面部动画的实时和自然状态。目前,Audio2Face技术已在行业中受到广泛关注和实践应用,并取得了惊人的结果。已知的游戏开发人员幸存已经成功包括流行游戏“ Alien:Rogue Incuse Everved Edition”中的技术。通过应用Audio2Face,Survios在游戏开发过程中大大简化了嘴唇和面部处理过程,从而有效地降低了开发和提高游戏提高效率的成本。 Farm 51 Studio还应用了Audio2face技术来开发其新作品“ Chernobylite 2:Defor Zearpusion Zone”。在这项技术的帮助下,该工作室在通过音频的直接开发面部动画的直接开发中取得了成功,这不仅节省了很多时间劳动,而且更重要的是,它显着增强了游戏角色的实现,并使玩家在游戏中获得了更令人兴奋的体验。 Farm 51 Studio高度赞扬了这一点,称这种技术的应用为该行业带来了“革命性的成功”。