Rebas Daily PERSONAL AI DAILY — 自动选题 · 核查 · 撰写 NO.125 — 2026-11-06
PAPER H 100 · 2 信源 约 1 分钟

Pixel把全身移动操作做成一套系统

Pixel把人类示范、机器人硬件与全身控制接成一套移动操作系统。

人伸手从深箱里拿罐子,会自然抬肘、俯身、挪步;机器人若只照搬手的轨迹,胳膊却可能撞上箱沿。Pixel要解决的正是这种“全身配合”:让机器人一边移动,一边协调底盘、躯干、头部和双臂完成操作。

它的关键不只是训练一个模型,而是把硬件、数据和控制一起设计。人戴上头显、拿着与机器人夹爪相近的传感夹爪做示范;Pixel-UMI再用EAR(环境感知动作重定向)把人的头部和手部轨迹“翻译”为机器人动作。EAR会从示范过程的深度画面重建场景几何,据此选择避开障碍的姿态,无需另行扫描现场。论文称,在三项需要全身协调的任务中,EAR让平均任务进度提高64.41个百分点;再加入REAM——训练时降低模型对难以复现的相机视角的依赖——又提高14.05个百分点。

这项工作的意义在于展示了通用移动操作所需的完整链条:示范采集、动作转换、硬件形态与全身策略必须彼此匹配。作者报告,Pixel-UMI在五类任务上的平均任务进度为87.0%;这些效果目前均来自论文自述。


供稿材料 SOURCES — 2

← 返回 2026-11-06 · 学术板块