雷峰网 发布于 09/14 10:50

NUS Show Lab 寿政教授:打通自回归与离散扩散,打造下一代具身大模型底座|ECCV 2026

查看原文

资讯摘要

    作者丨 张璐     编辑丨岑峰                                                                          

AI 摘要

在 ECCV 2026 上,新加坡国立大学 Show Lab 负责人寿政教授介绍了 Show-o 与 Show-2 系列多模态模型。该架构在单个 Transformer 中融合自回归预测与离散扩散生成,并通过循环一致性监督缓解具身智能的数据稀缺问题;Show-2 借助 3D Tokenizer 与时空双向注意力提升连续视频生成的连贯性,团队还自研 Q1 实时骨干网,推动云端大模型与端侧低延迟控制在机器人任务中形成闭环。

AI 问答

Show-o 架构的核心突破是什么?

它首次将自回归与离散扩散融合在单个 Transformer 中:处理文本理解与生成时保持自回归模式,生成图像或视频时切换到基于离散 Token 的掩码扩散模式,十几步迭代即可恢复完整视觉 Token,兼顾多模态文本建模与高效图像生成。

循环一致性监督解决了什么问题?

它针对具身智能等领域的标注稀缺问题,先由理解模块为无文本描述的图像生成描述,再用该文本驱动生成模块重建图像,通过对比原图与重建图建立自监督闭环,使模型能从海量无标签视频中学习。

团队如何实现具身机器人的低延迟控制?

采用云端大模型与端侧微调模型结合的策略。云端前沿大模型规划能力强但单次决策需约 8 至 20 秒,基于开源底座微调的本地模型可实现近乎实时的低延迟控制,在双臂协作等复杂任务中成功率与响应速度更高。

打开原文

更多资讯

夜晚睡眠光照太亮可能会损伤心脏Solidot · 09/16 00:45谁在给我们制造 AI 焦虑金色财经 · 09/15 20:38CLARITY闯关失败 加密市场闻声而动 政策空白谁填补金色财经 · 09/16 15:26首个AIGC长片大赛!RunningHub单项大奖100万,科幻IP免费改编量子位 · 09/15 15:48vivo Buds Clip 体验:42 小时续航的无感佩戴,音质好也舒服爱范儿 / APPSO · 09/16 13:55B站AI无限竞技场今日上线!全球百大AI模型同场竞技,GPT-6高居榜首量子位 · 09/16 14:23今晚「鸽派加息」?金色财经 · 09/16 16:082人团队0融资,用AI搓的复古相机APP霸榜韩国总榜第4,还做到了3个月10亿销售额?人人都是产品经理 · 09/16 10:20清晰法案投票失败 后续还有机会吗?金色财经 · 09/16 14:34圆桌:量智共振·多元路径:共筑中国量子产业下一个十年 | 36氪 2026产业未来大会36氪 · 09/15 15:35Python 拥抱 RISC-V:CPython 正式纳入 Tier 3 平台InfoQ 中文 · 09/15 22:34AI 减速还是不减速:一场周末点燃的行业与政府对垒金色财经 · 09/15 12:06地平线第1500万颗征程芯片搭载大众 ID. AURA T6,HSD V2.1 即将推出量子位 · 09/15 21:32「沃什时代」首次加息要来了?华尔街算好了三种剧本金色财经 · 09/16 20:25让 AI 补货,但不让它算库存——LangGraph 在生鲜补货的落地实践人人都是产品经理 · 09/15 10:55Firefox 156 释出Solidot · 09/16 14:25Build an AI-powered product tagging system with Amazon SageMaker serverless model customizationAWS Machine Learning Blog · 09/16 00:11PS2 Fat 使用的安全芯片在时隔 26 年被破解Solidot · 09/16 23:54只会搜关键词还不够,Agent 需要一套更聪明的本地搜索人人都是产品经理 · 09/15 16:17Stella:“显化”想要的人生,60天35万美元月收入人人都是产品经理 · 09/16 14:09手机替我跑了一整套流程!我就说了一句话,AI执行了100步量子位 · 09/15 20:47项目汇报怎么讲,才能让领导看见你的价值?人人都是产品经理 · 09/16 11:32OpenAI 总裁最新采访:现在所有人对 AI 的预测,大概率都是错的人人都是产品经理 · 09/15 16:19超级智能体“迪迪虾”上车,比亚迪携手阿里云推进智能座舱升级雷峰网 · 09/15 11:58圆桌:探路·产业分工的新图谱,看到新未来——国家力量如何转化为产业价值 | 36氪 2026产业未来大会36氪 · 09/15 17:39Arc主网上线 生态内有哪些项目?金色财经 · 09/16 17:39圆桌:新能源:后时代的深水淘金 | 36氪 2026产业未来大会36氪 · 09/15 17:56iOS 27 正式版体验:Siri AI 终于开窍了,老 iPhone 升级也有新东西爱范儿 / APPSO · 09/15 13:00在金融支付系统中实施混沌工程:来自企业级 ECS 部署的经验教训InfoQ 中文 · 09/15 17:04渣打给ARB十美元目标价靠什么?金色财经 · 09/16 21:36