量子位 发布于 09/10 15:57

全球首个可仿真的人–场景交互重建框架 HSImul3R:让人类视频真正成为机器人技能来源

查看原文

资讯摘要

大晓机器人联合南洋理工大学 S-Lab、上海人工智能实验室发布全新人–场景交互重建研究 HSImul3R

AI 摘要

大晓机器人联合南洋理工大学 S-Lab、上海人工智能实验室发布人–场景交互重建框架 HSImul3R,已被 ECCV 2026 接收。该框架提出物理闭环双向优化机制,将重力稳定性、真实接触与交互稳定性纳入重建标准,并构建 HSIBench 基准。三档任务交互稳定率显著优于 HSfM,三维穿模率从 69.51% 降至 22.90%,并将优化后的人体动作迁移至 Unitree G1 人形机器人。

AI 问答

HSImul3R 想解决什么问题?

它针对三维视觉中长期存在的感知—仿真鸿沟,让重建结果不仅视觉上正确,还能在物理仿真中保持重力稳定、真实接触与交互稳定。

HSImul3R 的核心方法是什么?

它提出物理闭环双向优化框架:一方面用面向场景的强化学习优化人体运动,使其与当前场景稳定交互;另一方面用直接仿真奖励优化(DSRO)借助仿真反馈反向修正三维场景。

HSImul3R 的效果如何?

在 Easy、Medium、Hard 三档任务中交互稳定率为 53.68%、30.56% 和 13.92%,高于 HSfM 的 10.52%、4.50% 和 2.66%,人–场景三维穿模率从 69.51% 降至 22.90%。

打开原文

更多资讯

今晚「鸽派加息」?金色财经 · 09/16 16:08不止一颗CPU?智能体经济时代,Arm对算力平台有了新理解雷峰网 · 09/15 09:58CLARITY折戟 多方博弈撕裂行业预期 市场怎么看?金色财经 · 09/16 10:33实测豆包新模型2.1-pro,这次审美和长时间Agent任务都追上第一档了人人都是产品经理 · 09/16 17:21Steam Frame 起售价 1059 美元Solidot · 09/15 14:59英伟达带动AI数据中心大变革,中国厂商不想当边缘人36氪 · 09/16 14:22担心代码被拿去训练!英伟达:限制员工使用 Claude;一汽将成广汽第二大股东!南北丰田拟合并;苹果回应「iPhone 18 Pro破发」雷峰网 · 09/15 08:23工作流可以自我进化了,英伟达开源 SoL-Pi,每小时省13.5刀!雷峰网 · 09/15 11:02CoinEx宣布体面关停:值得肯定但不该神化金色财经 · 09/16 22:20派早报:豆包发布手机助手消费者版,绿联发布首款雷电 5 显卡坞等少数派 · 09/15 08:06时光机器遭遇大规模机器流量Solidot · 09/16 16:32CLARITY的失败 跟加密行业好坏没啥关系金色财经 · 09/16 14:11高通技术公司携手中兴努比亚和豆包手机助手,共同推动智能手机迈入个人AI新时代量子位 · 09/16 16:18Mistral 与 Mozilla 合作推出 Firefox Smart WindowSolidot · 09/16 18:53HIP-3:昂贵的入场券 买不来的护城河金色财经 · 09/15 09:48清晰法案投票失败 后续还有机会吗?金色财经 · 09/16 14:34产品定义意义上的一级场景:四维模型人人都是产品经理 · 09/16 14:07飞书与豆包工作合体后首亮相:Agent 能进群,还能帮你写周报、做PPTInfoQ 中文 · 09/16 02:37自主团队被捧过头了?Simon Rohrer 直言:你们交付的根本不是产品InfoQ 中文 · 09/16 21:23Arc主网上线 生态内有哪些项目?金色财经 · 09/16 17:39云岫资本合伙人宋旭文:量子计算:工程化与产业化并进,拐点将至 | 36氪 2026产业未来大会36氪 · 09/15 18:38Meta新研究:字节模型蒸馏后,天花板破了量子位 · 09/15 14:37Claude在英伟达内部被限用,黄仁勋告诉特朗普:我们不会让AI发展放缓发生InfoQ 中文 · 09/16 00:01QQ 飞车 Agentic 研发转型过程中的Loop EngineeringInfoQ 中文 · 09/16 01:24Ctenophores Aren’t Just Beautiful. They’re Biological Wonders.Quanta Magazine · 09/16 23:56当黄仁勋和Dario遇上休谟:火鸡、台球与AI末日论金色财经 · 09/15 22:18全球AI视频榜单第一梯队再添中国力量:智象发布首款物理规律导向视频模型量子位 · 09/15 18:41AMC 炮轰 Robinhood:股票归谁做主?金色财经 · 09/15 21:18算力、机器人、仿真与资本,谁在定义物理AI下一个十年?|第十届全球ICT峰会回顾36氪 · 09/15 17:47就业率砍半,年轻人靠什么翻盘?AI时代,这三点越早做越好人人都是产品经理 · 09/15 16:12