要点速达👈
- 🤖 Hugging Face与NVIDIA联合推动开源机器人技术,提升研发效率
- 🔍 LeRobot提供数据采集、模型训练、仿真环境等全面工具
- 🌍 NVIDIA Isaac Lab高保真仿真环境加速物理AI数据生成
- 🚀 在Hugging Face Hub上共享数据、模型,构建机器人社区生态
- 📈 合作为制造、物流、医疗健康等行业的AI创新提供技术支持
数智朋克讯,Hugging Face与NVIDIA近日在德国慕尼黑机器人学习大会(CoRL)上宣布合作,将整合Hugging Face的LeRobot开源AI平台与NVIDIA的AI与机器人技术,帮助研究人员和开发者推进制造业、医疗健康、物流等多个行业的创新。双方携手构建开源的机器人研发平台,为研究人员提供涵盖数据采集、仿真、模型训练与推理部署的完整工具链,旨在通过开源共享推动全球机器人社区的发展。
该合作依托Hugging Face LeRobot和NVIDIA Isaac Lab的开源框架。LeRobot是一个全面的开源平台,开发人员可在其上设计共享数据集、低成本机械臂套件、仿真环境和模型训练工具。同时,Hugging Face Hub为全球数百万开发者提供超过150万个AI模型、数据集和应用,简化了从模型微调到管线构建的工作流程。借助LeRobot,开发者可将NVIDIA的仿真与AI技术结合,实现快速的数据采集、模型训练与推理验证。
在物理AI的发展中,采集高质量、符合真实物理环境的训练数据一直是难题。为此,NVIDIA Isaac Lab在仿真过程中使用GPU加速的物理引擎,并通过高保真渲染与并行环境执行创建逼真的合成数据。这些数据可用于模拟机器人在真实环境中执行任务的操作,通过模仿学习策略加速了数据采集与训练的效率。在仿真中验证通过的策略模型可直接应用到搭载NVIDIA Jetson的机器人硬件上,为实现机器人研发规模化创造了条件。
Hugging Face LeRobot首席研究科学家Remi Cadene认为,将Hugging Face的开源AI社区与NVIDIA Isaac Lab的仿真平台结合,有望推动机器人领域的快速发展。这一跨平台协作模式不仅推动了机器人数据共享与开源资源的扩展,也为机器人系统稳健性和可靠性测试提供了完整的工作流,使开发者可以在Hugging Face平台上共享数据、模型和工作流程,进一步构建社区的“数据飞轮”。
在大会期间,NVIDIA展示了结合视觉语言模型(VLM)、生成模型等多模态技术的研究,支持机器人的长距离导航与环境理解。通过开源生态协同发展,Hugging Face与NVIDIA致力于推动运输、制造、物流等行业的技术进步,为全球机器人开发者提供了更广阔的创新空间。