9 月 15 日,生数科技发布了 Vidu S2——一个能让你边播视频边改内容的 AI 工具:正在播放的视频流里,一句话就能换衣服、换背景、换画风、甚至把人换掉,动作和节奏纹丝不动。关键是:发布即全量开放,不搞内测、不限名额,今天就能玩。
这篇文章带你从零上手,把两个模型的核心玩法都跑一遍。
一、Vidu S2 是什么?先搞清两个模型
Vidu S2 包含两个细分模型,各管一摊事:
| 模型 | 干什么用 | 一句话理解 |
|---|---|---|
| S2-Avatar | 实时数字人:上传一张照片,生成能跟你语音互动的角色 | 养一个”活的”数字人 |
| S2-Editing | 实时视频编辑:对正在播放的视频流实时改外观 | 视频版”美图秀秀” |
S2-Editing 有四种实时编辑能力:
- 虚拟试穿:传一张衣服图,秒上身,动作不穿帮
- 背景替换:这一秒在卧室,下一秒在卢浮宫
- 角色替换:把画面里的人换成另一个形象,连肢体节拍都一致
- 风格迁移:实拍变水墨、赛博朋克、动漫风等 50+ 种画风
相比上一代 S1,S2 的升级很实在:实时输出从 540p 提到 720p(25-42 帧)、数字人能听指令跳舞转圈、对话中途还能随时递参考图换道具换衣服。
二、手把手上手:S2-Avatar 数字人玩法
第 1 步:打开体验入口
浏览器访问 vidu.cn/vidu-stream(手机也能开),进入实时交互页面。需要登录账号,语音模式要允许麦克风权限。
第 2 步:创建你的数字人
可以选平台预设角色直接开聊,也可以上传一张人物照片(正面清晰照效果最好),再挑一个音色,几十秒就能生成你的专属数字人。
第 3 步:语音互动 + 动作指令
直接开口说话,它会实时回应。S2 的一大升级是听懂动作指令——你可以说:
- “转个圈”
- “跳一段舞”
- “拿起桌上的杯子笑一笑”
上一代做不了的全身动作,S2 基本都能跟上。
第 4 步:中途递参考图(精髓所在)
这是 S2 最有意思的玩法:对话进行中,随时上传一张新图片,它会立刻”接住”:
- 递一张外套照片 → 它当场换上
- 递一杯奶茶的照片 → 它拿在手里展示,而且不会凭空消失
- 递一张海滩图 → 场景无缝切换
物品和状态会被记住:你说”拿起杯子再微笑”,杯子不会在第二个指令执行时消失。
三、手把手上手:S2-Editing 实时改视频
第 1 步:进入编辑模式
在同一个入口选择 S2-Editing,输入源支持三种:摄像头实时画面、本地视频、图片。
第 2 步:选模式 + 发指令
四个模式对应四种编辑:风格渲染、虚拟试穿、主体替换、背景替换。操作就两样东西:
- 一条文本指令:比如”把她的外套换成驼色大衣”
- 一张参考图(可选):指定换成什么样子
第 3 步:等几秒生效
注意,”实时编辑”不是零等待:发送指令后,画面切换需要几秒钟(摄像头采集、网络传输、生成返回都要时间)。直播场景使用时要预留这个切换余量,别在关键镜头前现改。
实测效果参考:换装时服装随动作的形变处理得比较自然,人物动作和脸部一致性保持得很好。也有两个已知小毛病:换第二套衣服时边界略有涂抹感、戴帽子时头发可能轻微穿模——都在可接受范围。
四、费用怎么算?先看这张表
网页体验的额度以登录后页面显示为准(新用户一般有免费额度可玩)。如果要长期用或接 API,官方定价如下:
| 项目 | 计费 | 折算 |
|---|---|---|
| S2-Avatar 实时版 | 1.5 积分/秒 | 约 2.81 元/分钟 |
| S2-Editing 实时编辑 | 1 积分/秒 | 约 1.88 元/分钟 |
| 积分单价 | 0.03125 元/积分 | 500 元起充 16000 积分 |
几个省钱提醒:
- 实时版音色复刻前 10 个免费,超出约 28 元/个
- 每个账号有 5 个免费并发,商业多路直播要另算并发费用
- 持续会话按秒扣费——用完记得结束通话,挂后台也在烧积分
五、普通人能拿它做什么?5 个实用场景
- 电商试穿展示:服装商家上传衣服图,让模特实时上身展示,买家下单前就能看到上身效果,能降低退货率
- 直播间换背景:卖冲锋衣秒切雪山、卖美妆瞬间置身巴黎秀场,不用真去外景
- 短视频风格化:一条实拍素材批量转成水墨、动漫等不同画风,一鱼多吃
- IP 角色内容:让虚拟形象”接住”观众点播——弹幕说想看它穿恐龙服,下一秒就穿上
- 口播视频变装:一条口播素材里切换多套穿搭,省掉换装重拍的时间
六、新手避坑指南
- 先短会话测试:正式用于直播前,先用几分钟短会话确认声音、画面、网络都正常
- 看清边界处:换装效果重点检查衣服和头发交界处,这是当前最容易穿模的位置
- 试穿图≠真实效果:AI 试穿展示的是生成结果,不能反映真实衣服的尺码、垂感,商家用的时候别过度承诺
- 动作指令别太复杂:大幅动作(跳舞、转身)支持度不错,但极端姿势和快速遮挡仍可能崩
- 跑分数据打个小折:官方公布的各项第一均为厂商口径,实际效果以你自己的体验为准
写在最后
Vidu S2 把 AI 改视频从”提需求、等重生成”变成了”看着它当面改”,这个交互变化对做直播、短视频、电商内容的人来说是实打实的效率提升。趁现在全量开放,建议今天就打开 vidu.cn/vidu-stream 传张照片试试——从一个换装指令开始,你会很快摸到门道。