关键功能

人工演示视频充当上下文任务提示。
一项策略支持语言指令和真人视频提示。
视频示例可以识别相似对象中的预期实例。
演示传达了多阶段操作任务的时间顺序。
演示的上下文方法无需更新特定于任务的参数即可执行任务。
报告的数据集包含跨 8.6K 任务的 74.2K 人类机器人对。
IFP 训练策略在预测任务演化时使用人类视频上下文。
该项目提供代码、数据、预训练和训练后发布链接。

因果视频动作策略可以从语言和人类视频提示中学习。数据管道将采样的机器人轨迹转换为语义匹配的人类演示,在 8,600 项任务中生成 74,200 对。上下文中的未来块预测鼓励策略使用视觉演示,而不是通过文本或最近的机器人历史记录的捷径。


Zero-WAM 对于任务泛化研究很有用,无需为每个请求收集一组新的机器人演示。该项目演示了通过互联网或现场真人视频指定任务并在无需更新参数的情况下执行。公共链接提供代码、数据以及预训练和后训练资源。

在您的网站添加此徽章,以获得更多点赞并登上搜索结果顶部!

嵌入按钮预览 - 浅色主题
嵌入按钮预览 - 深色主题

Subscribe to the AI Search Newsletter

Get top updates in AI to your inbox every weekend. It's free!