GTC22 | Omniverse ACE 助力更简单、快捷地部署交互式虚拟形象
2022-09-30 14:10
#人工智能 #深度学习 #GTC22 分享到微信 分享到微博
GTC 大会上的演示展示了 AI 赋能的虚拟形象,该虚拟形象可以响应自然语言并提出智能推荐。
Violet 是一个 AI 赋能的客服助理,可以随时受理客户的订单。
Violet 在本周 GTC 大会上首度亮相,这是一款基于云的虚拟形象,其发布代表着利用 NVIDIA Omniverse Avatar Cloud Engine(ACE)进行虚拟形象开发的最新进展。这套云原生 AI 微服务有助于更轻松地大规模构建和部署智能虚拟助理和数字人。
为了让 Violet 等交互式虚拟形象“动起来”,开发者需要确保 3D 人物能够“看到”、“听到”、“理解到”,以及能与人“交流”。但是,由于传统方法通常需要昂贵的设备、特定的专业知识和耗时的工作流,因此,构建栩栩如生的虚拟形象是一项极具挑战性的工作。
Violet 演示中展示了 Omniverse ACE 所提供的构建、自定义和部署交互式虚拟形象所需的所有 AI 基础模块,以简化虚拟形象开发。无论是处理餐厅订单,还是回答关于宇宙的问题,这些 AI 助理可以针对几乎所有行业的需求轻松进行定制,并能帮助组织改进现有工作流,挖掘新的商机。
观看视频,了解 Violet 如何与用户互动、回复语音提示并进行智能推荐:
Omniverse ACE 让 Violet 栩栩如生
在该演示中,Violet 是一个具有基础动画且可完全操纵的虚拟形象。为了构建 Violet,NVIDIA 的创意团队使用了该公司的统一计算框架(Unified Compute Framework,UCF),这是一个全面加速的框架,开发者能借助该框架将进行过优化和加速的微服务融入实时 AI 应用中。UCF 帮助团队为 Violet 构建了微服务图,并将其部署在云中。
Omniverse ACE 能为交互式虚拟形象后端提供支持,本质上是充当 Violet 的大脑。此外,NVIDIA 还基于 ACE 构建了两个参考应用,即 NVIDIA Tokkio 和 NVIDIA Maxine。
在开发过程中,Violet 采用了 Tokkio 应用工作流,这一工作流可赋能交互式虚拟形象以智能方式查看、感知、交谈并提供推荐,以加强在线和现场(餐馆和商店等)的客户服务。
NVIDIA Maxine 提供了一套 GPU 加速的 AI 软件开发套件和云原生微服务,用于部署 AI 功能,以增强实时视频通信。Maxine 集成了 NVIDIA Riva SDK 的实时自动语音识别和文字转语音功能,以及“实时肖像”照片动画和眼神交流功能,可以使虚拟形象与真人之间的沟通更顺畅,理解更得当。
NVIDIA 的创意团队使用 UCF 为部署在云中的 Violet 构建了微服务图
新的微服务扩展了虚拟形象的可能性
动画 AI:Omniverse Audio2Face 可让用户更轻松地根据任何配音音轨制作 3D 角色动画,帮助用户为游戏角色、电影角色或实时数字助理制作动画。
对话式 AI:包含用于语音 AI 的 NVIDIA Riva SDK 和用于自然语言处理的 NVIDIA NeMo Megatron 框架,可让开发者快速构建并部署先进的应用,从而提供高度精准、富有表现力的声音并实时响应。
AI 虚拟形象为各行各业带来新变革