首页 > 行业观察 > NVIDIA研究团队推出“黑科技”:仅需一个音频即可快速生成表情丰富的虚拟数字人

NVIDIA研究团队推出“黑科技”:仅需一个音频即可快速生成表情丰富的虚拟数字人

新知榜官方账号

2023-10-13 02:44:30

虚拟数字人面临表情和互动不够自然的困境

随着元宇宙概念的大热,以及疫情叠加下人们对数字生活需求的增加,虚拟数字人的发展步入了快车道,出现了很多类似于华智冰、柳夜熙、翎Ling等超写实虚拟数字人。而人与这些虚拟数字人最大的区别是有感情、能够体会到喜怒哀乐,且能够把喜怒哀乐实时地通过语言、表情等来体现。而虚拟数字人不具备自然表达的能力,这使得虚拟数字人被吐槽一眼假、不够真实。如果想为虚拟数字人引入最接近“人”的喜怒哀乐,且具有实时的交互能力,不仅要进行配音、口形适配,还要考虑当前的语态、语境,进行面部表情分离,并重新渲染面部表情。过去常通过面捕技术来驱动虚拟数字人面部与嘴型的变化,整个环节非常复杂,时间、人力、物力成本巨大。开发者和内容创作者亟需成本更低、开发更简便的工具来降低虚拟数字人的制作门槛和成本。

仅需一个音频实时生成虚拟数字人面部动画

NVIDIA研究团队开发的“黑科技”Omniverse™Audio2Face,仅需一个音频来源,即可快速轻松生成表情丰富的面部动画。该工具经过人工智能训练,仅需一个离线语音录音或实时音频,就能立即为虚拟数字人生成富有表现力的面部动画。Audio2Face可简化3D角色的动画制作,与任何配音音轨匹配,无论是为游戏、电影制作动画角色,还是单纯为了获得乐趣,都可以使用;还可以将其用于实时互动,或作为传统的脸部动画创作工具使用。

“全流程+低代码”助力虚拟数字人制作便捷化

作为加速虚拟数字人制作的有力工具,Omniverse™Audio2Face具有全流程和低代码的特点,开发者甚至不需要掌握专业的知识,就可以完成一个虚拟数字人的制作。此外,Omniverse™Audio2Face还有以下几个亮点功能:音频输入、角色转移、扩展输出、数据转换、情感控制、Audio2Emotion、全脸动画、角色设置等。

AI驱动的超写实虚拟数字人将加速普及

近年来,AI在虚拟数字人生成和驱动上展现了较高的效率。Omniverse™Audio2Face可以使虚拟数字人的开发门槛和制作成本迅速降低,让开发者和内容创作者参与其中,加速虚拟数字人在更多场景的应用和普及。

本页网址:https://www.xinzhibang.net/article_detail-16635.html

寻求报道,请 点击这里 微信扫码咨询

相关工具

相关文章

相关快讯

ChatGPT,Midjourney,文心一言,文心一格,bing新必应,Stable diffusion,文心一格,稿定设计,墨刀AI,mastergo,Adobe Firefly

短视频知识人物影响力榜

查看更多

新知榜独家 {{faTime.effecttime}}发布

总榜

人物 领域 粉丝数 影响力指数

{{item.manIndex}}

{{item.nickname}} {{item.field}}

{{item.fs}}

{{item.effect}}