Praxis-1:同时预测视频与动作的开放机器人模型

2026 年 11 月 13 日发布 18 0 0

Runway面向机器人开发者的世界动作模型,开放权重、推理与微调代码,用视频预训练辅助机器人动作控制。

收录时间:
2026-11-13
Praxis-1:同时预测视频与动作的开放机器人模型Praxis-1:同时预测视频与动作的开放机器人模型

官网:Praxis-1 机器人产品页

一句话介绍:Runway 面向机器人开发者的世界动作模型,开放权重、推理与微调代码,用视频预测辅助机器人执行操作任务。

产品背景

Praxis-1 是 Runway 的首个世界动作模型。它在2026年9月已被介绍,11月11日的重要变化是正式开放权重及相关代码,采用 Apache 2.0 许可,允许符合许可条件的商业使用。此次收录的重点是机器人模型,不能把 Runway 的视频创作会员套餐当作它的购买入口。官方开放公告

核心功能与应用场景

Praxis-1 把视频和机器人动作放在同一预测过程中:模型依据任务、相机画面和机械臂状态,给出下一段动作及相应的视频预测。对于机器人研发,这提供了研究视觉变化与控制指令关系的共同基础。它适合抓取、物体搬放、双臂协作等操作任务的策略开发,以及不同设备上的适配实验。项目说明

Runway 将它描述为270亿参数的混合专家扩散 Transformer。官方列出的合作硬件包括人形机器人、六轴工业机械臂和双臂仓储机器人;这说明其适配方向较广,不代表下载同一权重就能直接控制任何机器人。模型迁移仍涉及相机、动作空间、数据和控制接口。机器人产品页

谁适合使用

主要用户是机器人研究者、具身智能团队、机械臂厂商及具备模型部署经验的开发者。已有示教数据、仿真环境和可控测试设备的团队,更容易把开放模型纳入研发流程。普通用户若只是想生成视频或体验聊天,不应把这个项目当作轻量网页工具。

如何开始

建议先在仿真中运行官方示例,再考虑连接实体设备。仓库提供 DROID 单臂和 YAM 双臂检查点,也列出 SO-100/SO-101 机械臂适配权重。准备环境后下载对应权重、验证文件,运行仿真任务,确认相机与动作输入输出,再用自己的数据进行微调或 LoRA 适配。

需要特别留意算力:仓库快速开始给出的配置是 Python 3.12、CUDA 13.0 驱动及至少80GB显存的单张 CUDA GPU。官方也提供量化及不同硬件路线,但不能据此推断所有检查点都能在普通显卡上直接运行。读者应按具体模型、精度和运行路径核对要求。部署与微调文档

费用、许可与限制

权重开放不等于运行免费。自部署仍需要 GPU、存储、机器人设备、数据采集和工程投入;托管推理另按服务提供方条款计费。Apache 2.0 也不等于免除许可证及声明保留义务,依赖模型和组件应分别核对许可。正式接入机械臂前,应设置动作范围、急停与人工监督,用自己的任务验证失败情况。本文未对实体机器人进行实测。

与同类项目怎么选

项目 主要侧重 适合任务 需要注意
Praxis-1 视频与动作联合预测,开放推理和微调路线 机械臂策略、跨设备适配研究 算力和硬件接入门槛高
Physical Intelligence π0.5 视觉—语言—动作模型,研究新环境中的泛化 家庭与操作任务的策略研究 研究表现不等于任意家庭可直接部署
NVIDIA Isaac GR00T 面向通用人形机器人的模型、工作流与参考平台 人形机器人完整开发流程 应结合具体模型、硬件和工具链评估

选择的关键是已有设备、数据和开发栈,而非单一榜单名次。不同任务和测试条件下的成功率不能直接替代自己的验证。π0.5 官方研究;Isaac GR00T 官方平台

数据统计

相关导航

暂无评论

none
暂无评论...