Aioga
AI资讯 / 产品更新
返回 AI资讯

Hugging Face 发布 Grabette:开源手持夹爪系统,无需机器人即可录制操作数据

Hugging Face:Blog(RSS)Aioga 编辑团队2026-07-21T00:00:00.000Z热度 53

Hugging Face 推出 Grabette,一套开源低成本系统,用户手持夹爪即可在几分钟内录制操作演示,并自动生成机器人可用的数据集。Grabette 配备鱼眼相机与 R...

产品更新Hugging Face:Blog(RSS)

今日 AI 情报摘要

Hugging Face 推出 Grabette,一套开源低成本系统,用户手持夹爪即可在几分钟内录制操作演示,并自动生成机器人可用的数据集。

Grabette 配备鱼眼相机与 RGBD 相机,通过 SLAM 恢复 6-DoF 轨迹,硬件物料成本约 490 欧元。 所有硬件设计、处理流程与训练代码均开源,数据以标准 LeRobot 格式上传至 Hugging Face Hub,支持任意机器人后端。

中文正文 · AI 翻译

瓶颈不是模型,而是数据。:#the-bottleneck-isnt-the-model-its-the-data 站在UMI的肩膀上:#standing-on-the-shoulders-of-umi 认识Grabette:#meet-grabette 为所有人而建:#built-for-everyone 从你的手到数据集,仅需两步:#from-your-hand-to-a-dataset-in-two-steps 1. 记录:#1-record 2. 处理,直接在浏览器中:#2-process-directly-in-your-browser 你可以用这些数据做什么?这里有一个例子。:#what-can-you-do-with-the-data-heres-one-example 现在轮到你了:#now-its-your-turn 接下来做什么:#whats-next 使用手持抓手在几分钟内记录你自己的操作任务,将它们自动转化为机器人可用的数据集,并帮助构建一个开放的、协作的机器人学习数据集。

Hugging Face 发布 Grabette:开源手持夹爪系统,无需机器人即可录制操作数据
Hugging Face 发布 Grabette:开源手持夹爪系统,无需机器人即可录制操作数据
Hugging Face 发布 Grabette:开源手持夹爪系统,无需机器人即可录制操作数据

机器人学习面临供应问题。我们拥有强大的策略架构(基于变换器的VLA、扩散与流匹配策略,甚至世界模型)和用于训练的GPU。但我们缺乏大型、多样化的真实世界操作数据。

通过遥操作机器人来收集数据可能成本高且要求严格:首先,这需要一个机器人。并且根据遥操作方式,如果数据收集耗时数小时,还可能对用户很枯燥,并涉及大量硬件和物流挑战。这在需要各种任务和环境的情况下很难扩展。

但你并不需要机器人来收集机器人数据。只需要一只人的手、一个抓手、一台摄像机,以及恢复手部操作六自由度轨迹的方法。捕捉示范,你就得到了可以让机器人学习的数据。

这就是我们今天发布的Grabette:一个开放的、低成本的操作数据记录系统。拿起它,用自己的手记录一个任务,然后获得干净的、机器人可用的数据集。无需机器人,无需实验室,无需遥控装置。

而更大的目标是:如果记录示范和拍摄视频一样简单,任何人都可以贡献数据。我们希望Grabette能为一个大型、开放、协作的操作数据集提供种子。一个单独的实验室无法单独构建这样的大型数据集。

Grabette 直接受斯坦福大学的通用操作接口 (UMI) 启发:https://umi-gripper.github.io/:这是一种手持式抓取器,配有鱼眼摄像头,可以记录“真实环境”中的演示,利用 SLAM 恢复摄像头轨迹,并从中训练视觉运动策略。

UMI 证明了这个方法可行。其他(封闭源代码)设备也存在,比如 Agibot 的 MEgo 抓手,Genrobot 的 DAS 抓手以及 Sunday Robotics 的技能捕捉手套。我们的目标是让使用变得毫不费力,将从“我有一个任务”到“我有一个训练好的模型”的门槛降到最低。

Grabette 构建在现代开放生态系统中:LeRobot 用于数据集,Hugging Face Hub 用于共享,还有一个可以在浏览器中运行、无需安装的处理管线。Grabette 是任何人都可以在工作台上构建、在实地使用并贡献数据的工具。

我们已经开发 Grabette 数月,并且觉得它已经足够可用,可以与大家分享。我们很高兴现在可以与您分享!

Grabette 是一款手持抓手,配备了重建操作演示所需的一切设备。

它配有两台摄像头,每个摄像头有着不同的用途。角色分工是故意为之:廉价的广角鱼眼摄像头为策略提供了丰富的上下文、手腕摄像头风格的视角,而 RGBD 摄像头则承担强大的 6 自由度跟踪工作。

在 Grabette 在用户执行任务的过程中记录数据时,它依赖其机器人对应设备在训练后执行学到的动作。所以,请认识 Gripette,它是 Grabette 的机器人臂末端执行器双胞胎。

这一系列产品共享相同的硬件基因:

Grabette 手持记录设备(左)和 Gripette 机器人抓手(右)

去查看仓库吧!:https://github.com/pollen-robotics/grabette

组件。标准可购买的传感器,无封闭管线,无分支锁定。一块树莓派,标准 Pi 摄像头,一台现成的 OAK-D 深度摄像头,磁性编码器。整个意义就在于任何人都可以用可以直接订购的零件自己组装一个。

设计上与机器人无关。捕获或数据格式中没有假设特定的机械臂。演示存储为相机本地的6自由度笛卡尔位姿加夹爪状态,输出为Hugging Face Hub上的标准LeRobot数据集,因此相同的数据可以驱动不同的机器人和不同的学习方法。不过,你的机械臂上仍然需要匹配的Gripette夹爪。

此发布使任何人都能从“我想演示一个任务”快速转变为“我有一个可用于训练的数据集”,而无需先前的专业知识。

按下按钮时,观察相机、跟踪相机(彩色、深度和IMU)以及夹爪的编码器关节值会同时记录,使用单一的共享时钟以确保正确同步。再次按下按钮以停止这一回合,数据会保存在Raspberry Pi本地。

:https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/grabette/Browser_postprocess_small2.gif

在浏览器中打开Grabette仪表板。选择你想要添加到数据集的回合,一键点击即可开始后处理。

现在一切已经准备好开始训练!

一个数据集只有在可以训练某些东西时才有趣。因此,为了展示完整的循环,我们提供了一个完整的示例。但需要明确的是,这只是功能示例,而不是产品:发布的是录制系统。你的Grabette数据可以与任何使用LeRobot数据集的方法配合使用。

我们的示例采用了200个记录的演示,例如:

数据集可在该HF Dataset获取:https://huggingface.co/datasets/chouziel/dataset-cup-0107

策略可在该HF Model获取:https://huggingface.co/SteveNguyen/pick_cup_0107_smooth-best

数据瓶颈不能仅通过一个实验室解决,而是通过社区在各处录制演示来解决。你现在可以帮忙建立数据集:搭建一个Grabette,记录你感兴趣的任务,并在Hub上分享它们。每一回合都会让开放数据集更大、更丰富,而每一位贡献者都会让机器人学习稍微少一些被昂贵硬件限制的门槛。

这个发布只是项目的开始!Grabette 将会持续发展。我们已经有更多计划,包括 Casquette,一款头戴式视角设备,旨在补充 Grabette 进行自我中心的拍摄(仍在开发中)。但最重要的下一步不仅是我们的,也是你的:开始录制,让我们一起构建数据集。

👉 构建一个 Grabette(GitHub):https://github.com/pollen-robotics/grabette · 处理你的数据(HF Space):https://huggingface.co/spaces/pollen-robotics/grabette-slam · 为数据集做出贡献

将 Grabette 录制内容转换为 LeRobot SLAM 数据集

情报判断

Aioga 编辑摘要

Aioga 编辑摘要:Hugging Face 推出 Grabette,一套开源低成本系统,用户手持夹爪即可在几分钟内录制操作演示,并自动生成机器人可用的数据集。 Aioga 将其归入「产品更新」方向,重点关注它对真实使用和行业竞争的影响。

背景分析

背景分析:模型与研究类动态需要结合能力边界、开放方式、成本、可用性和真实任务表现判断,单项指标领先不等于已经形成稳定采用。

Aioga 观点

Aioga 判断:这条动态更适合作为行业观察信号,当前信息足以建立线索,但不足以推导长期结论。

影响与后续

影响分析:对相关团队而言,短期应先核对来源、可用范围和实际成本,再判断是否值得接入或跟进。 后续观察:继续观察官方文档、实际可用性、价格变化、开发者反馈和竞品回应。

来源与版权说明

本页正文由公开来源页面提取并按原有信息整理,同时保留来源、发布时间和原文入口。版权归原作者及来源网站所有,请通过原文链接核验和阅读来源版本。

抓取通道: RSS · 原始域名: huggingface.co

来源: Hugging Face:Blog(RSS)

原文链接: 打开原始来源

Aioga 归档: 查看情报页

Content record: source-page · Updated: 2026-07-21T00:00:00.000Z

API 中转站
API RELAY · DEVELOPER INFRASTRUCTURE

API 中转站

统一接入主流 AI 模型 API,为开发、测试与生产环境提供稳定调用入口。

立即访问 api.w173.com
AIOGA SHARE POSTER

分享这篇 AI 情报

Hugging Face 推出 Grabette,一套开源低成本系统,用户手持夹爪即可在几分钟内录制操作演示,并自动生成机器人可用的数据集。Grabette 配备鱼眼相机与 R...

Hugging Face:Blog(RSS)2026-07-21T00:00:00.000Z
扫码打开文章详情扫码直达文章详情

Aioga 自动聚合全球 AI 动态,并保留来源信息用于核验与引用。