雷峰网 发布于 08/28 15:17

大晓联合香港大学发布StreamPI,让 VLA 真正理解时间,迈向连续物理智能

查看原文

资讯摘要

  当 VLA 模型理解语言、感知环境并直接生成机器人动作,一个更基础的问题开始浮现:机器人如何理解一个持续变化的物理世界?物体从哪里移动而来、杯子此前遮住了什么、机械臂正在接近还是远离目标——真正决定下一步动作的信息,往往不只存在于当前一帧,而存在于连续的时间之中。

AI 摘要

大晓机器人联合香港大学发布StreamPI,为VLA模型引入连续时序建模能力,通过指令持续锚定、历史信息流式缓存与随机时间间隔训练,使机器人理解状态变化与时间演进。实验显示其在LIBERO、CALVIN及真实任务中显著提升时序记忆与精细操作成功率,推动具身智能从空间智能迈向时空智能。

AI 问答

StreamPI与传统的VLA模型有何不同?

传统VLA主要依据单帧图像独立决策,StreamPI通过持续的多模态时序建模,让模型记住历史观测并理解状态变化,为动作决策补充时间维度。

StreamPI如何避免重复计算历史视觉信息?

StreamPI采用流式推理,首帧编码后存入键值缓存,后续仅处理新信息并直接调用历史表示,无需重复计算整个观测窗口,且不增加额外模型参数。

打开原文

更多资讯

从入门到精通,一篇文章带你入门产品经理!(2026 年最新版)人人都是产品经理 · 09/16 08:53HIP-3:昂贵的入场券 买不来的护城河金色财经 · 09/15 09:48算力、机器人、仿真与资本,谁在定义物理AI下一个十年?|第十届全球ICT峰会回顾36氪 · 09/15 17:47派早报:豆包发布手机助手消费者版,绿联发布首款雷电 5 显卡坞等少数派 · 09/15 08:06微信桌面端变“三折叠”,可能是在给小微腾位置人人都是产品经理 · 09/15 09:46GPT-6 Astra实现具身智能突破 中国如何打具身防卫战金色财经 · 09/16 14:58Robinhood的财富效应金色财经 · 09/16 12:47月之暗面:网传创始人及员工信息系恶意造谣;OpenAI 放弃今年上市;iPhone Duo炒到9万,黄牛贷款欲囤货|AI周报InfoQ 中文 · 09/16 00:07Stella:“显化”想要的人生,60天35万美元月收入人人都是产品经理 · 09/16 14:09CLARITY的失败 跟加密行业好坏没啥关系金色财经 · 09/16 14:11关于项目交付的思考:部署是最后两公里,验收才是最后一公里人人都是产品经理 · 09/16 09:54一边喊停一边敲钟:硅谷AI巨头到底在怕什么金色财经 · 09/16 10:53实时互动、实时改视频、探索空间视频,Vidu S2一次放了三个大招量子位 · 09/16 10:58AMC 炮轰 Robinhood:股票归谁做主?金色财经 · 09/15 21:18推特创始人谈“AI减速”论:前沿不属于任何一家公司金色财经 · 09/15 17:30Firefox 156 释出Solidot · 09/16 14:25基元律动与无问芯穹达成战略合作,推进高质量Token供给与应用量子位 · 09/16 16:09GPT-6 Sol要来了?OpenAI本周或迎“发布狂潮”金色财经 · 09/16 13:17云岫资本合伙人宋旭文:量子计算:工程化与产业化并进,拐点将至 | 36氪 2026产业未来大会36氪 · 09/15 18:388点1氪丨8月一线城市房价上涨;携程上架510万一张的太空旅行船票;字节跳动上半年净利润出现下滑,但海外收入占比再创新高36氪 · 09/16 08:01把记忆交给CPU,大模型会变快量子位 · 09/16 11:07想把喜欢的故事做成动画?我用 AIXTV 把《聊斋》做出来了人人都是产品经理 · 09/16 17:22月下载暴增366%,上海真人社交公司切入东南亚AI陪伴,AI角色也能“奔现”人人都是产品经理 · 09/16 14:44阶跃发布 StepAudio 3 ,多款语音模型登顶 Artificial Analysis 全球榜单雷峰网 · 09/15 17:50Mozilla 报告称中国开放权重模型与美国前沿模型仅相差 4.4 个月Solidot · 09/16 18:30Announcing instance preference lists for Amazon SageMaker AI training jobsAWS Machine Learning Blog · 09/16 00:01语义翻译的操作日常:把”我觉得不对”变成”机器能查”人人都是产品经理 · 09/16 09:52工作流可以自我进化了,英伟达开源 SoL-Pi,每小时省13.5刀!雷峰网 · 09/15 11:02旗舰SoC进入融合计算时代,天玑9600 Pro首创AI原生架构!雷峰网 · 09/15 21:01vivo Buds Clip 体验:42 小时续航的无感佩戴,音质好也舒服爱范儿 / APPSO · 09/16 13:55