Nvidia
Nvidia于本周展开的Nvidia GTC开发者大会上发表全新专案Project GR00T,这是一个专为人形机器人设计的通用基础模型,主要用来推动机器人技术及体现人工智慧(Embodied AI)领域的突破。
根据Nvidia的定义,Project GR00T为一针对人形机器人所设计的通用多模态模型,它可充当机器人的大脑,协助机器人学习解决各种任务的技能。专案名称为Generalist Robot 00 Technology的缩写,意指利用该专案所训练的可能是「第零零代」的多才多艺机器人。
基于Project GR00T的机器人将可透过观察人类行为,来理解自然语言及模仿人类动作,以快速学习协调、灵巧或其它技能来导航、适应现实世界,以及与现实世界互动。
负责体现AI的Nvidia研究经理Jim Fan透过X表示,Project GR00T将使机器人能够理解多模态指令,诸如语言、影片或示范,还能执行各种有用的任务。Nvidia正在与全球主要的人形机器人业者合作,以让GR00T能够部署到各种人形机器人上。
Nvidia也开发各种与GR00T有关的技术,例如GR00T是在Omniverse Isaac Sim模拟平台上的iIsaac Lab应用进行模拟,在云端运算调度服务OSMO上进行训练,并部署至新的运算平台Jetson Thor。
其中,Jetson Thor为一基于Thor系统单晶片的人型机器人电脑,它能执行复杂的任务,安全且自然地与人类及机器人互动,具备一个针对效能、功耗与尺寸进行最佳化的模组化架构。
Jetson Thor搭载Blackwell GPU,具备可提供800 teraflops之8位浮点AI效能的引擎,以用来执行诸如GR00T等多模态生成式AI模型,亦整合安全处理器、高效能CPU丛集与100GB的乙太网路宽频,简化了设计与整合的工作。
现阶段与Nvidia合作的人形机器人公司涵盖1X Technologies、Agility Robotics、Apptronik、Boston Dynamics、Figure AI、Fourier Intelligence、Sanctuary AI、Unitree Robotics 及XPENG Robotics 等。