首页 > 机器人 > 基于NVIDIA Jetson打造,这款训练有素的机器狗对主人唯命是从
基于NVIDIA Jetson打造,这款训练有素的机器狗对主人唯命是从

基于NVIDIA Jetson打造,这款训练有素的机器狗对主人唯命是从

2019-08-30 20:16

#人工智能 #机器人


这个机器人不仅长得像狗,而且学起来也像狗!来自佛罗里达大西洋大学机器感知与认知机器人实验室的研究人员刚刚开发出了机器狗Astro。


研究人员介绍称,“Astro不是基于预编程代码运行的。相反,Astro正在被输入一个深度神经网络(计算机模拟大脑的网络)来接受训练,这样它就可以从经验中学习,执行类似人类的任务,或者在它的案例中,执行类似狗的任务,进而帮助人类。”

Astro的主要职责是服务视障人士,或协助医护人员进行医疗诊断监督。

Astro配备了传感器、雷达、摄像头、定向麦克风和一组NVIDIA TX2模块来处理感知输入。有了内置的GPU, Astro每秒可以执行多达四万亿次计算。

研究人员解释说:“Astro将配备十多个传感器,这些传感器将在包括光学、声音、气体甚至雷达在内的多种模式下进行环境输入。”

深度学习训练方面,Astro使用4台NVIDIA GeForce RTX 2080Ti GPU进行训练,使用PyTorch训练动作分类模型,使用配备TensorRT的TensorFlow进行模型压缩。训练数据包括图像、视频等人体动作数据、手势数据、姿态提取数据和行为分类数据。

重达60磅的Astro目前可以对“坐下”、“站立”和“躺下”等指令做出反应。



研究人员希望Astro最终能够理解和响应手势信号,探测不同的颜色,理解多种语言,与无人机协调工作,进行面部识别,以及宠物探测和识别。

Astro背后的研究人员包括神经科学家、IT专家、生物学家、心理学家、高中生、佛罗里达大西洋大学的本科生和研究生。领导这个项目的是Elan Barenholtz博士,他是该大学心理学系的副教授。

相关新闻