NVIDIA发布Jarvis，将语音视频等传感器信息汇聚至单一AI平台
2019-10-24 18:44
分享到微信
分享到微博
在洛杉矶举行的世界移动通信大会（MWC）上，NVIDIA创始人兼首席执行官黄仁勋在演讲中宣布推出了NVIDIA Jarvis。这是一个能够构建和部署人AI应用程序的开发套件（SDK），可以将视觉、语音和其它传感器信息整合到单一系统中。
NVIDIA Jarvis——多模式AI SDK
NVIDIA Jarvis可提供完整的工作流，以构建、训练和部署AI系统，从而在情景中使用语音和手势、注视等视觉提示。例如，将唇部活动与语音输入结合起来，以识别当前正在说话的人；而通过凝视，确定说话者是在与现场的AI设备交流，还是在与现场其他人交流，如此一来，AI系统可以在需要深入理解的情景中实现多用户、多情景同步对话。
该全新SDK可提供适用于语音任务的多个基础模块，如：意图和实体分类、情绪分析、对话建模、域和执行映射。
在视觉方面，各模块可以检测和跟踪人员以及检测关键身体标志和身体姿势、手势、唇部活动和凝视。
通过Jarvis，用户还可以在具体用例中应用自定义模块或微调功能。
Jarvis可以基于NVIDIA EGX堆栈运行边缘和物联网用例，该堆栈可与所有已面市的Kubernetes基础架构相兼容。
NVIDIA Jarvis——多模式AI SDK
NVIDIA Jarvis可提供完整的工作流，以构建、训练和部署AI系统，从而在情景中使用语音和手势、注视等视觉提示。例如，将唇部活动与语音输入结合起来，以识别当前正在说话的人；而通过凝视，确定说话者是在与现场的AI设备交流，还是在与现场其他人交流，如此一来，AI系统可以在需要深入理解的情景中实现多用户、多情景同步对话。
该全新SDK可提供适用于语音任务的多个基础模块，如：意图和实体分类、情绪分析、对话建模、域和执行映射。
在视觉方面，各模块可以检测和跟踪人员以及检测关键身体标志和身体姿势、手势、唇部活动和凝视。
通过Jarvis，用户还可以在具体用例中应用自定义模块或微调功能。
Jarvis可以基于NVIDIA EGX堆栈运行边缘和物联网用例，该堆栈可与所有已面市的Kubernetes基础架构相兼容。
