生数科技发布Vidu S2双旗舰,实时互动与视频编辑多项评测领先-要闻
近日,生数科技正式发布 Vidu S2,并于发布当天全量开放在线体验。
此次发布包括两款模型:面向持续交互数字角色生成的 S2-Avatar,以及面向输入视频流实时编辑的 S2-Editing。
(资料图片仅供参考)
其中,S2-Avatar 将实时输出提升至 720P,并支持用户在互动过程中随时加入新的参考图,让角色能够持续响应新的指令和视觉信息;S2-Editing 则面向持续输入的视频流,可以实时改变画面中的风格、服装、人物和背景。
除了实时互动和实时编辑,Vidu S2 还把探索进一步延伸到了空间视频。
几乎同一时间,“实时空间视频”正在成为视频模型领域新的关注方向。9 月 7 日,彭博社援引知情人士报道称,字节跳动正在开发一款基于 Seedance 的实时空间视频生成模型,由张一鸣亲自督导,并计划面向直播、短剧、游戏以及 Pico 等 VR 场景,探索交互式虚拟世界。具体发布时间目前尚未最终确定。
Vidu S2 此次也展示了类似方向上的技术探索:将实时生成或实时编辑的视频转换为左右眼视频,并通过 VR 头显观看。
例如,一个由 S2-Avatar 实时生成的角色,可以一边与你持续对话和互动,一边以空间视频的形式呈现在头显中;基于 S2-Editing,现实世界持续输入的视频也可以被实时修改,再进一步转换为空间视频观看。
视频模型正在从“生成一段内容”,继续走向对持续视频流乃至沉浸式空间体验的实时操控。从实时生成,到实时编辑,再到空间视频,这也是 Vidu S2 相较上一代进一步扩展的能力边界。
Vidu S2 的全链路研发由朱军教授的博士生、生数科技流式视频生成与推理负责人张金涛负责。相比部分实时交互模型在发布初期采用早期体验申请或限量研究预览,Vidu S2 选择发布即全量开放。用户可通过【插入官方地址】直接使用,在实际操作中感受模型对新指令、新参考图以及持续视频输入的实时响应。
根据生数科技公布的技术报告,S2-Avatar在实时数字角色生成基准 StreamAV-Bench的九项指标中,均取得报告所列对比模型的最 优结果;S2-Editing在多项视频编辑基准中,也取得超过报告所列离线与流式对比模型的总体得分。
立即体验: https://vidu.com/vidu-stream
API 平台: http://platform.vidu.com/vidu-stream/doc
技术报告: https://arxiv.org/pdf/2609.11638
足坛一夜动态:梅西参加国家队告别赛!皇马3-2 C罗0-4惨败 每日速看
最资讯丨视频|鸠山由纪夫:不可篡改历史!应把真相告诉年轻人
造势真的有用?金球奖概率凯恩一周跌10%,亚马尔涨9%,姆巴佩略涨 焦点热文
焦点热文:“青铜剑”亮相南珠高铁玉林北至岑溪东段 开展逐级提速试验
- 1 快看:利元亨非公开发行股票申请审核状态变更为提交注册
- 2 今日热文:东海县好家选珠宝商行(个体工商户)成立 注册资本5万人民币
- 3 从东决到年年卡五成胜率,老鹰为什么还是卡在中间
- 4 要闻:*ST帅电(605336):重大资产购买报告书(草案)修订说明
- 5 赛百味小食被曝有大量黑色油渣,门店称烤盘没及时更换 焦点消息
- 6 风口词典丨风电:欧洲供给收紧,中国风电的出海拐点_精彩看点
- 7 大摩上调埃森哲目标价至175美元 每日速看
- 8 伦纳德转发官宣海报:我回来了,猛龙生涯场均26.6分|焦点热议
- 9 今日讯!没水平但高薪,杜加里:德泽尔比执教热刺像不戴头套的抢劫
- 10 光通信板块局部走强 海光芯正(01191)涨4.10% 高盛上调光模块需求预期-独家焦点