揭秘NVIDIA GR00T人形机器人项目本质,快看!
扫描二维码
随时随地手机看文章
NVIDIAGR00T是英伟达旗下的人形机器人项目之一,NVIDIAGR00T项目受到很多朋友的关注。为增进大家对NVIDIAGR00T的认识,本文将对NVIDIAGR00T的本质予以详细介绍。如果你对NVIDIAGR00T或是对本文内容具有兴趣,不妨和小编一起来继续往下阅读哦。
一、NVIDIAGR00T 引言
据预测,未来二十年,人形机器人市场将迎来爆发式增长,市场规模有望达到380亿美元。为应对这一巨大市场需求,特别是在工业和制造业领域的迫切需求,NVIDIA在近日CES展会上宣布了一系列重要举措。
NVIDIA创始人兼首席执行官黄仁勋亲自揭晓了NVIDIA Isaac GR00T Blueprint的发布。这一Blueprint旨在加速下一代人形机器人的开发进程,通过提供机器人基础模型、数据管线和仿真框架,为开发者提供强有力的支持。
Isaac GR00T Blueprint的核心功能在于其能够生成海量的合成运动数据。这些数据将帮助开发者通过模仿学习来训练人形机器人,从而大幅提升机器人的运动能力和适应性。这一创新技术的推出,无疑将为人形机器人的研发带来革命性的突破。
NVIDIA表示,将继续加大在人形机器人领域的研发投入,与全球开发者携手共进,共同推动人形机器人技术的创新与发展。
二、GR00T 的本质
GR00T 本质上是为众多人形机器人提供的一个 AI 平台,其中包括波士顿动力、Figure AI 和小鹏等公司。英伟达在 去年 GTC 大会上发布了人形机器人项目 GR00T,旨在 开发人形机器人的通用基础模型,该模型将多模式指令和过去的交互作为输入并输出机 器人动作。这种先进的模型是模块化的,具有用于高级推理和规划以及低级快速、准确 和反应性运动的系统。GR00T 项目使用了 NVIDIA 三台计算机机器人堆栈的所有部分, 其中包括用于训练模型的 NVIDIA AI 和 DGX™、用于强化学习的 NVIDIA Isaac™ Lab, 以及用于加速机器人运行时间的 NVIDIA Jetson ™ Thor 和 Isaac ROS。
1)NVIDIA DGX:NVIDIA DGX Cloud 是一个面向开发人员的端到端的 AI 平台,也是 英伟达推出的一项云计算服务,旨在为用户提供高性能计算资源,特别是针对深度学习 和 AI 应用,该服务主要是基于英伟的 DGC 系列超级计算机,且这些超级计算机具备强 大的 GPU 和深度学习加速器,能够迅速进行负责的计算任务。
2)NVIDIA Isaac Lab:基于 NVIDIA Omniverse™平台构建,该平台专门针对机器人 学习进行了优化,对于机器人基础模型训练至关重要。它针对强化、模仿和迁移学习进 行了优化,能够训练所有类型的机器人实例。
3)Isaac ROS on Jetson Thor:NVIDIA Isaac ROS 是一组加速计算包和 AI 模型,旨 在简化和加快高级 AI 机器人应用程序的开发。每一款 Jetson 系列都是一个完整的系统 模组(SOM),Jetson 系列是面向人形机器人开发的解决方案,满足各种应用的性能和预 算需求,这套方案中不仅仅有高性能、高度集成的芯片(系统芯片包含基于 NVIDIA Blackwell 架构的下一代 GPU,并配备变压器引擎,提供 800 万亿次浮点 AI 性能,可运 行 GR00T 等多模态生成式 AI 模型)平台,还有丰富的配套资源。
分层端到端模型大大加快了人形机器人的训练速度。人形机器人大模型从最初的大语言 模型到现在的分层端到端模型,产生了巨大的变化。在最开始,人形机器人的运动动作 基本上是通过软件层面预先编码的,如波士顿动力基本上是采用预设路径。随后出现的 大语言模型,初步让人形机器人脱离预设路径可以自主决策,但最初的 LLM 并非是端到 端的模型,而是仅能识别文字、或是独立分为多个模块的模型,无法及时反馈和涌现能 力也不够强大。大模型发展至今,端到端模型已经成为人形机器人首选,目前的分层端到端模型相比传统的大语言模型存在诸多的优点:
1)精确度高:端到端模型是指输入数据后输出端会得到一个较准确的预测结果,通常分 为控制、执行和决策三个层级,在计算过程中,每一个层级得到的结果均会反向反馈以 得到较为精确的决策。
2)高效性:端到端模型相比大语言模型内部更为紧凑,系统内部计算流程更快,模型反 应效率也更高。
3)灵活性:相比传统大语言模型智能处理文本 token,端到端模型可以处理诸多如图像、 声音、动作、3D 信息等输入内容,模型只需微调便可转换场景。
4)可以通过仿真模拟收集收据:不再需要每个动作都需要人类或视频教机器人学习,端 到端模型泛化能力较长,机器人可自行学习和计算相应的动作。
以上便是此次带来的GR00T 相关内容,通过本文,希望大家对GR00T 已经具备一定的了解。如果你喜欢本文,不妨持续关注我们网站哦,将于后期带来更多精彩内容。最后,十分感谢大家的阅读,have a nice day!