量子位 发布于 09/06 19:44

具身ICL来了创业玩家!上下文成Scaling新赛道

查看原文

资讯摘要

让机器人学会利用更长的多模态Context

AI 摘要

量子位专访可可矩阵CEO高宇翔,解读具身智能领域兴起的In-Context Learning路线:Skild、Generalist等玩家展示one-shot能力后,行业开始把上下文理解作为新Scaling方向。可可矩阵成立于今年4月,主张将ICL前置到预训练阶段,用条件表征实现“强理解、轻生成”,并认为未来机器人智能应以学会新任务所需时间来衡量。

AI 问答

与只使用语言指令相比,加入视频上下文后机器人的未见任务表现能提升多少?

Skild AI的测试显示,随着数据规模增加,ICL视频Prompt效果反超传统语言Prompt;对于未见任务,加入视频context后模型表现相比只用语言指令提升约7倍。

可可矩阵的具身ICL路线与其他玩家有何不同?

Generalist和Skild偏向于在后训练阶段展示One-Shot能力,可可矩阵则把后训练的ICL前置到预训练阶段,用条件表征让模型根据任务意图动态提取视觉信息,实现强理解、轻生成。

高宇翔认为未来衡量机器人智能应更关注什么指标?

相比单次任务成功率,他更看重第一次成功平均耗时,即机器人看一次示范后需要多久才能第一次学会任务,这对应教学成本和学习效率。

打开原文

更多资讯

当黄仁勋和Dario遇上休谟:火鸡、台球与AI末日论金色财经 · 09/15 22:18CLARITY的失败 跟加密行业好坏没啥关系金色财经 · 09/16 14:11AI不会放缓金色财经 · 09/15 10:33YC 最值钱的这 20家公司,没有一家来自最近5年人人都是产品经理 · 09/15 10:3919.98 万元起,吉利银河战舰 700 开启预售,最高 1129 匹马力,还有三电机四驱爱范儿 / APPSO · 09/15 21:04协同办公进入Agent时代,飞书+豆包工作跑在了最前面量子位 · 09/16 15:46vivo Buds Clip 体验:42 小时续航的无感佩戴,音质好也舒服爱范儿 / APPSO · 09/16 13:55GPT-6 Astra 之后,产品经理需要重新设计人在流程中的位置人人都是产品经理 · 09/16 09:10Xspark AI 丁文伯:触觉替代不了视觉,但机器人需要一套自己的“脊髓” |物理AI 50人雷峰网 · 09/15 15:52清晰法案投票失败 后续还有机会吗?金色财经 · 09/16 14:34Java新闻汇总:Simple JSON API、GlassFish、Jakarta EE、JNoSQL和Open Liberty、LangChain4jInfoQ 中文 · 09/16 19:06圆桌:智能向实,产业向新——AI如何进入真实世界 | 36氪 2026产业未来大会36氪 · 09/15 18:00圆桌:生长·资方投资的新方程——穿越周期的耐心与价值 | 36氪 2026产业未来大会36氪 · 09/15 17:0658秒出杯,能拉花的咖啡机器人,在全球70国卖出600万杯36氪 · 09/15 10:21场景越多 ≠ 产品越好,:从抽象价值到真实生活的定义结构人人都是产品经理 · 09/15 11:58AI 产品经理怎么入行?岗位方向、核心能力与转型路径一次讲清人人都是产品经理 · 09/15 08:54Optimizing cost and latency with Amazon Bedrock prompt cachingAWS Machine Learning Blog · 09/16 00:18企业案例分享:玉盘量智-离子阱量子计算芯片化集成工程实践 | 36氪 2026产业未来大会36氪 · 09/15 18:33AI 负责创造,人来干脏活,这事儿能否停一下?InfoQ 中文 · 09/15 08:08OpenAI 发布适用于编程和计算机应用的 GPT-6 AstraInfoQ 中文 · 09/16 00:52Ctenophores Aren’t Just Beautiful. They’re Biological Wonders.Quanta Magazine · 09/16 23:56AI 写了几十页 PPT,“经营分析”报告仍被批不够深入?人人都是产品经理 · 09/15 11:32超级智能体“迪迪虾”上车,比亚迪携手阿里云推进智能座舱升级雷峰网 · 09/15 11:58加密行业今年最重要的一天 可能就是明天金色财经 · 09/15 14:16OpenAI 总裁最新采访:现在所有人对 AI 的预测,大概率都是错的人人都是产品经理 · 09/15 16:19主题演讲:破界·量子计算迈向产业深水区——量子计算的下一公里|36氪2026产业未来大会36氪 · 09/15 15:49从入门到精通,一篇文章带你入门产品经理!(2026 年最新版)人人都是产品经理 · 09/16 08:53产品观察丨xTool做了一台3000元起步的激光雕刻机,难的不只是价格36氪 · 09/16 10:40圆桌:量智共振·多元路径:共筑中国量子产业下一个十年 | 36氪 2026产业未来大会36氪 · 09/15 15:35豆包工作打出“团队Agent”牌,Workbuddy、千问会跟吗?人人都是产品经理 · 09/16 14:31