science 论文机器人与具身智能其他2026-11-02

Pixel:低成本轮式人形的全栈移动操作系统

CMU 提出硬件、数据采集、全身控制与策略学习协同设计的系统,含17自由度人形上身与无机器人人类数据采集接口。

发布时间
2026-11-02
link 原始页面

notes 内容介绍

移动操作长期是机器人学习里最难啃的一块:它同时要求手指级的灵巧、对环境的主动观察、长距离导航和全身协调,而任何一环掉链子,整套行为就完不成。CMU 的 Deepak Pathak、Ruslan Salakhutdinov 与 Tony Tao 等人提交的 Pixel 工作,针对的正是这个问题:能不能不靠昂贵平台和海量真机数据,用一套软硬件协同设计的全栈系统把通用移动操作学出来。这份资料值得现在看的原因在于它的取向——不是单点突破某个算法,而是把机器人本体、数据采集接口、全身控制器和策略学习流程当成一个整体来设计,这种「全栈」思路最近在具身智能领域越来越被重视。

资料覆盖的是 Pixel 系统的完整链路:硬件端是一台低成本轮式人形机器人,采用人体对齐的运动学和柔顺夹爪;数据端提供多种遥操作接口,此外还有不需要机器人参与的人类数据采集接口;控制与学习端包含统一的全身控制器,以及人类示范与机器人示范共用的策略学习流程。换句话说,从「怎么把人的动作变成机器能用的数据」,到「怎么让这些数据训练出的策略在真实本体上跑起来」,资料都给出了对应模块。需要说明的是,材料给出的是系统构成与能力描述,没有给出成本数字、成功率、数据规模等量化指标,因此下面的关键点只能按模块来讲,无法给出性能对比。

第一个关键点是硬件选择上的取舍。Pixel 没有走双足路线,而是采用轮式底盘加人形上半身,并让人体对齐的运动学与柔顺夹爪配合。这意味着系统的设计目标不是挑战行走本身,而是把复杂度集中到移动操作这一侧——轮式底盘提供了稳定的移动基础,人形上半身与人体对齐的运动学则让人类的示范动作更容易映射到机器人上。柔顺夹爪同样是服务于这个目标的:它降低了对精确力控的依赖,也让遥操作采集数据时更容易成功。这里我理解为一种有意的工程折中,材料本身没有展开讨论取舍的代价。

第二个关键点是数据来源的双通道设计。材料列出两类接口:一类是面向机器人的多种遥操作方式,另一类是不需要机器人本体参与的人类数据采集接口。后者的价值在于绕开真机瓶颈——如果采集示范必须占用机器人,数据量和场景多样性都会被硬件数量限制住;引入无机器人的人类采集通道,等于把数据生产从设备上解耦出来。第三个关键点是学习流程的统一:人类示范与机器人示范共用同一套策略学习流程,配合统一的全身控制器,避免了上半身操作与底盘移动各自训练、再在部署时拼接的常见割裂。材料还提到分层学习栈支持语言条件控制与长时程任务,说明系统在时间尺度上也做了分层,短时程的视觉运动控制由语言条件驱动,长时程任务则由上层组织。

把这些拼起来看,Pixel 的思路意味着移动操作的瓶颈可能更多在系统集成而不是单个算法模块:统一全身控制器解决了「怎么执行」,共用策略学习流程解决了「人类和机器人数据怎么合流」,无机器人采集接口解决了「数据从哪来」,低成本轮式人形解决了「在哪里跑」。对实践者而言,这套组合给出的启示是,若要做通用的移动操作,硬件形态、数据接口与学习流程需要一起设计,否则很容易出现数据采不到、采到的用不上、用上的又跑不稳的连锁问题。另一个可迁移的判断是,把人类示范当作与机器人示范并列的一等数据源,而不是仅仅作为预训练或初始化手段,这可能会改变数据采集环节的投入分配。当然,这些都是基于材料构成的解读,材料没有给出消融或对比实验来支撑某一环的必要性。

读完这份资料,能拿走的主要是一套可参考的系统设计框架:低成本轮式人形加人体对齐运动学、遥操作与无机器人采集并行的数据接口、统一全身控制器、人类与机器人共用的策略学习流程,以及支持语言条件控制与长时程任务的分层学习栈。它更适合关注具身智能系统落地、需要为移动操作搭建数据与训练流水线的研究者与工程团队阅读,用来对照自己的系统设计缺口。边界也要说清楚:材料只描述了系统构成与所展示的行为类型,包括灵巧操作、主动感知、导航与全身协调的移动操作行为,但没有给出成功率、数据规模、成本或与其他系统的对比数字,也没有说明失败模式与适用场景的限制,因此不宜把这套设计当作已验证的性能结论来引用。

Full text at publisher

全文在原站

这份资料的出版方不允许嵌入阅读。本站保留中文标题、导读与要点,方便你先判断是否值得读;下面的按钮会在新窗口打开原文。