长期任务

微信扫码分享
斯坦福机器人讲座 | 2026年春季 | 长程机器人自主性

斯坦福机器人讲座 | 2026年春季 | 长程机器人自主性

本讲座涵盖: • 开发长时域机器人自主性的要素,即赋予机器人策略记忆能力,并训练既广泛适用又高性能的通用行为 • 通过两项工作(π0.6-MEM 和 π0.7)在该方向上的最新进展 • 在实现长时域物理自主性的道路上仍缺失的环节 **视频 AI 总结**:该视频介绍了 Physical Intelligence 公司在机器人长期任务能力上的最新进展。核心在于解决机器人执行长周期任务时需要的记忆与泛化能力问题。作者 Carl 首先展示了机器人当前在短程精细操作任务上的成功,但指出缺少长期记忆导致无法完成实际场景中的复杂任务。为此,他们提出了多尺度具身记忆(Mem)系统,结合短时视觉记忆与长时语言记忆,使机器人能够追踪进度、适应失败并持续完成任务。此外,还介绍了最新发布的 π0.7 模型,通过丰富的条件控制(如子目标、元数据)让单一策略同时实现高泛化性与高性能,并展示了零样本跨机器人技能迁移和人类语言指导下的任务学习。 **主要内容**: - 机器人当前能完成精细短任务,但缺乏记忆和泛化能力,无法处理长期、开放世界的任务。 - 提出多尺度记忆架构:短时使用压缩视觉记忆(约15帧),长时使用语言压缩记忆,避免计算延迟和分布偏移。 - 记忆使机器人能避免重复失败、适应环境变化(如从抽屉错误侧切换到正确侧)。 - π0.7 模型通过条件控制(子目标、质量标签等)训练单一策略,同时具备高泛化性和高性能,无需单独微调。 - 实验表明,条件训练能有效利用低质量数据,并实现跨机器人技能迁移(如UR5折叠衬衫)。 - 通过语言指导(教练模式)可让机器人学习新任务(如使用空气炸锅),无需遥操作。 2026年4月17日 Karl Pertsch 是 Physical Intelligence 的技术人员,从事机器人基础模型的训练工作。

50 0 0 2026-07-03 12:27