量子位 发布于 09/16 10:58

实时互动、实时改视频、探索空间视频,Vidu S2一次放了三个大招

查看原文

AI 摘要

量子位报道,生数科技发布Vidu S2视频生成模型,发布当天即全量开放、不限名额。此次升级主要有三点:S2-Editing可对正在播放的视频实时换装、换人、换背景与换画风;S2-Avatar把实时互动输出分辨率从540p提升到720p,并能在互动中接收参考图完成拿取物品等动作;此外还探索实时空间视频,可生成并编辑供VR头显观看的立体视频,文中也介绍了背后的流式训练与强化学习方案。

AI 问答

Vidu S2这次发布了哪三个主要升级?

一是S2-Editing实时视频编辑,可对正在播放的视频换装、换角色、换背景、换风格;二是S2-Avatar,实时互动角色升级到720P并可接收中途递来的参考图;三是实时空间视频探索,可将生成或编辑的视频转成左右眼画面送入VR头显。

Vidu S2如何实现视频“边播边改”?

通过重新设计位置编码,把参考图的注入位置与时间戳对齐,让模型知道新条件从哪个时间点开始生效;同时使用Backbone-Refiner两阶段架构和异步流水线,在720P输出下仍保持不掉帧。

Vidu S1到Vidu S2间隔了多久?

仅用了69天,就完成了一次大版本跃迁。

打开原文

更多资讯

云岫资本合伙人宋旭文:量子计算:工程化与产业化并进,拐点将至 | 36氪 2026产业未来大会36氪 · 09/15 18:38Windows 11 的 9 月例行安全更新再次引发了大量故障Solidot · 09/15 14:29这种国民鱼一直被低估、被当廉价鱼!现在才知道钙和 DHA 这么多!快试试果壳网 · 09/15 22:15英伟达开始限制Claude使用了金色财经 · 09/15 12:37iPhone 18 Pro & Duo 首发评测,提升最大的是「充电」和这个…爱范儿 / APPSO · 09/16 20:20缓存不该困在一台服务器里InfoQ 中文 · 09/16 07:00英伟达带动AI数据中心大变革,中国厂商不想当边缘人36氪 · 09/16 14:22清晰法案投票失败 后续还有机会吗?金色财经 · 09/16 14:34长期利率为何不愿下跌?金色财经 · 09/15 18:04苹果Siri AI上线;豆包手机助手消费版正式发布;塔克拉玛干沙漠发现两处大型地下水水源果壳网 · 09/15 20:15基元律动与无问芯穹达成战略合作,推进高质量Token供给与应用雷峰网 · 09/16 16:20川普让步了 为何Clarity法案还遭到全体民主党人反对金色财经 · 09/16 10:43AI不断进步 不得不把才华埋葬在昨天金色财经 · 09/15 10:14主题演讲:破界·量子计算迈向产业深水区——量子计算的下一公里|36氪2026产业未来大会36氪 · 09/15 15:49iOS 27 正式版体验:Siri AI 终于开窍了,老 iPhone 升级也有新东西爱范儿 / APPSO · 09/15 13:00黄仁勋正演讲遇特朗普突然来电:通话全程直播金色财经 · 09/15 21:339月21日,深圳前海!聊聊工业AI与生态共创的下一步量子位 · 09/15 13:20圆桌:中国之光成为新共识| 36氪 2026产业未来大会36氪 · 09/15 17:15从”边卖边补”到”准备好再卖”:产品商品化的四步闭环人人都是产品经理 · 09/15 14:11西门子不造机器人,为什么机器人进厂的故事里总有它?量子位 · 09/16 15:38耐克、妮维雅、谷歌的警示:品类,正在误导品牌战略!人人都是产品经理 · 09/15 09:42香港第一、全球第八:OSL进化背后的数字资产新格局金色财经 · 09/16 21:42企业该买模型还是养上下文?人人都是产品经理 · 09/16 10:39算力、机器人、仿真与资本,谁在定义物理AI下一个十年?|第十届全球ICT峰会回顾36氪 · 09/15 17:47读完斯坦福116页AI实施手册,我最大的感受是:别再盯着模型了人人都是产品经理 · 09/15 12:14豆包手机明日开卖,AI能帮你操作App了吗?36氪 · 09/15 22:32渣打给ARB十美元目标价靠什么?金色财经 · 09/16 21:36清晰法案有概率通过?市场可能并未定价金色财经 · 09/15 13:50Firefox 156 释出Solidot · 09/16 14:25CoinEx宣布体面关停:值得肯定但不该神化金色财经 · 09/16 22:20