告别重复抽卡,让AI视频生成更可控,你也可以当导演了

大家好呀,我是鹿野。
最近这段时间,我用Seedance 2.5做了不少视频。不得不说,它确实已经很强了,很多复杂镜头都能完成得不错。但是还是不可避免地需要重复抽卡。
但做得越多,我越发现,提示词很难把人物站位、机位和运动路径交代得特别准确。尤其是多人走位、镜头切换和环绕跟拍这类画面,生成结果还是容易跑偏,只能反复抽卡。
其实据我了解影视拍摄本来就会先做预演,把人物怎么走、镜头怎么动提前排一遍。只是以前通常需要用 Blender、C4D 这类3D软件,普通创作者很难上手。

刚好最近用了一个软件,只需上传一张场景图就能生成白模场景,再摆人物、调机位和排运镜并能生成人物走位,运镜视频。简单来说,白模不是成片,而是先把镜头和走位确定下来,再交给视频模型作为参考,来完成最终画面。

下面先看看效果。
看了效果是不是觉得还不错?
于是我拿它分别测试了一镜到底、多机位对话和环绕跟拍。
案例一:一镜到底,先看镜头听不听话
第一个案例,我准备做一段便利店里的生活剧情,看看预演台能不能把一镜到底的运镜和人物走位准确还原出来。
在无线画布中鼠标右键选择“新建预演台”。

然后在预演台的编辑窗口中,选择“生成空间”或者“创建场景”。

先上传需要用到的场景参考图,点击生成,updream就会根据图片中的空间布局和透视关系,自动搭建对应的3D白模。这个步骤目前不消耗积分,用起来还是挺方便的。

生成速度也很快,通常几分钟就能完成。白模创建好后,场景中的主要结构、货架和通道位置也会一起还原出来。

然后我就在文件里添加了剧情所需要的人物,我这设定了一个人走进便利店,摄像头跟随,进入便利店,镜头对准购物的女孩,然后镜头缓缓上升旋转对准超市工作人员。
完成了,场景搭建,点击右上角的“录制”按钮导出白膜动画视频。

导出以后,画布上就会出现一个刚刚做的白模动画视频。

录制的视频效果如下。
接下来新建一个“视频”节点,把角色和预演台录制的视频一起连接到新建的视频节点,输入提示词:
1 | 视频1 预演台全局录制 1(1080p 16:9) 是唯一的场景结构、人物位置和镜头运动参考。严格保持视频1 预演台全局录制 1(1080p 16:9) 中便利店的空间布局、货架位置、人物走位、出现顺序及完整运镜轨迹,将原本的白模视频自然扩展为15秒。全程一镜到底,不切镜、不跳帧、不新增机位,不改变镜头移动方向。角色对应关系必须准确:图1 的黑衣年轻男人替换视频1 预演台全局录制 1(1080p 16:9) 中的蓝色人物;图2 的短发年轻女人替换视频1 预演台全局录制 1(1080p 16:9) 中的红色人物;图3 的男收银员替换视频1 预演台全局录制 1(1080p 16:9) 中的黄色人物。严格保持3名角色的面孔、发型、服装和年龄一致,全程只有这3名人物。故事发生在一个普通工作日的晚上。男顾客下班后走进24小时便利店,准备购买晚餐。室外天气无雨,地面干燥;便利店内灯光明亮温暖,氛围轻松自然。0—4秒:镜头从便利店入口向内平稳推进,跟随刚进门的男顾客 图片3 。他一边向货架内走,一边四处寻找商品,随口问:“请问,饭团放在哪儿?”4—9秒:镜头经过男顾客 图片3 身旁,沿着货架自然绕行,带出正在挑选商品的女顾客 图片3 。她抬头看向男顾客,伸手指向前方,友好地回答:“就在前面冰柜旁边,我刚看到。”9—13秒:镜头继续按照白模轨迹移动并转向收银台。男收银员 图片3 正在整理柜台上的商品,听见两人的对话后微笑着提醒:“需要加热的话,结账时告诉我。”13—15秒:男顾客在画面外自然回应:“好的,谢谢。”收银员微笑点头,继续整理商品,画面自然结束。写实都市生活电影质感,真实便利店材质,温暖自然的灯光,人物动作和表情生活化,不过度表演。普通话对白,口型与各自台词准确对应。保留轻微脚步声、商品包装摩擦声和冰柜运行声,无雨声、无旁白、无字幕、无文字、无品牌标志、无水印。 |
这里需要注意,输入提示词后,需要对提示词里面的白模视频和人物进行绑定,这样能让AI更能理解你的意思。

然后选择模型Seedance2.5模型,比例选择16:9,15秒,然后点击生成。

下面就是生成的效果。
案例二:多镜头切换测试
前面我测试的是一镜到底,这次再加一点难度,看看预演台能不能处理双人对话中的多机位切换。
场景设定在咖啡馆,一男一女坐着,依次安排女主近景、男主近景和双人全景,让整段对话更接近真实电影的拍摄节奏。
还是上传场景参考图,生成场景白膜。

下面是生成白模效果展示。
白模生成好了以后,我们需要在白模基础上添加人物站位、摄像头位置,以及在下面时间轴中,把三个机位添加到时间轴并添加片段,调整每个机位的时间排列,并进行全局录制。

然后新建一个“视频”节点,把所有的素材都连接到视频节点,并选择模型和时长,输入提示词:
1 | 预演台全局录制是粗粒度预演台参考,仅提供人物站位、人物朝向、机位、构图、运镜、切镜、动作路径和空间关系,不采用其中的白模人物外观、颜色、材质、黑色背景和灰白色场景;其中紫色白模人物对应女主,蓝色白模人物对应男主。图片8定义女主和男主的面部、发型、身材及全部服装,不采用图片中的背景、站姿和光线;图片01定义咖啡馆的空间布局、木质桌椅、吧台、咖啡设备、窗户、绿植、墙面置物架、材质和室内光线,不采用其他图片或预演台中的空白场景。生成一段15秒写实电影感咖啡馆生活短片,核心主体是一名年轻女性和一名年轻男性,主要事件是女主告诉男主自己即将离开这座城市,两人用下一次见面化解短暂的离别情绪。整体呈现真实都市生活电影质感,温暖自然的午后光线,窗外自然光与室内暖色吊灯共同照亮人物,以木质棕色、米色和灰蓝色为主,呈现真实的皮肤、头发和布料纹理,表演自然克制,不刻意煽情,无恐怖氛围、无悬疑感、无梦幻光效、无夸张滤镜、无慢动作、无过度景深虚化。女主是27岁左右的中国年轻女性,清秀自然的鹅蛋脸,深棕色中长发,淡妆,气质安静温柔,身穿浅米色短款风衣,内搭雾蓝色针织衫,下穿深蓝色直筒牛仔裤和白色休闲鞋,动作轻缓自然,情绪主要通过停顿、视线、嘴角和手指的小幅变化表现,不哭泣,不做夸张表情;男主是29岁左右的中国年轻男性,短黑发,五官干净自然,神态沉稳随和,身穿深灰蓝色休闲夹克,内搭纯白色圆领T恤,下穿浅卡其色长裤和棕色休闲鞋,听到消息时短暂愣住,随后用自然的微笑缓和气氛,不做夸张肢体动作。桌面上始终只有两只相同的深蓝色陶瓷咖啡杯,女主和男主面前各一只,咖啡杯的颜色、尺寸、杯柄方向和归属全程保持稳定。故事发生在现代城市街角咖啡馆的下午,女主坐在桌子左侧,男主坐在桌子右侧,两人隔着同一张木桌相对而坐;咖啡馆严格保持图片01中的真实空间结构,左侧为木质吧台和咖啡设备,中间为木质桌椅,右侧为临街大窗和绿植,墙上保留木质置物架,室内安静舒适,只有女主和男主两名顾客,不出现其他人物。0—4秒,开始时女主坐在桌子左侧,双手轻轻握着自己的咖啡杯,视线微微低垂,男主坐在她对面;女主停顿片刻,手指轻轻摩擦杯壁,随后抬起眼睛看向男主,用普通话轻声说:{我下个月,就去上海了。}结束时女主仍然看着男主,双手没有离开咖啡杯,嘴角保持平静,眼神中带着一点克制的不舍。4—8秒,男主仍然坐在桌子右侧,目光落在女主脸上,自己的咖啡杯放在面前;男主听完后微微愣住,眉毛轻轻抬起,短暂停顿后呼出一口气,嘴角露出自然的笑容,用普通话回答:{那这杯,算给你送行?}结束时男主保持淡淡的笑容,继续看着女主,右手自然放在自己的咖啡杯旁边。8—15秒,女主仍位于桌子左侧,男主仍位于桌子右侧,两只咖啡杯分别放在两人面前;女主听完后神情放松,嘴角慢慢扬起,用右手端起自己的咖啡杯,看着男主说:{不,算下次见面的预约。}男主轻轻点头,也端起自己的咖啡杯,两人身体自然向桌子中央靠近,两只咖啡杯轻轻碰在一起,发出<清脆而轻微的陶瓷碰杯声>;结束时女主仍在左侧,男主仍在右侧,两人保持坐姿,身体轻微朝向桌子中央,两只咖啡杯停留在木桌中央上方,两人隔着咖啡杯看着对方,露出自然、克制的笑容。持续保留安静的咖啡馆室内底噪、远处轻微的咖啡机运转声和窗外模糊的城市街道声,环境声保持低音量,不盖过人物对白;音乐为轻柔、克制的极简钢琴音乐,节奏缓慢,带有淡淡离别感但整体保持温暖,不使用悲伤弦乐和煽情音乐,0—4秒以环境声为主,钢琴只出现少量单音,4—8秒加入轻柔和弦,8—15秒音乐稍微变得温暖,最后一个音符与<陶瓷杯轻轻碰响>同时落下,随后自然结束。台词使用标准普通话,无明显地区口音,语速自然,人物口型与各自台词准确同步,不要字幕,不出现任何文字。保持女主的身份、面部、深棕色中长发、浅米色风衣、雾蓝色针织衫和深蓝色牛仔裤全片稳定;保持男主的身份、面部、短黑发、深灰蓝色夹克、白色T恤和浅卡其色长裤全片稳定;女主始终位于桌子左侧,对应预演台全局录制1(1080p 16:9)中的紫色白模人物,男主始终位于桌子右侧,对应其中的蓝色白模人物,不交换位置;保持两只深蓝色陶瓷咖啡杯的数量、颜色、尺寸、归属和位置逻辑稳定,不突然增加、消失或改变形状;保持图片01中咖啡馆的吧台、桌椅、窗户、绿植、墙面置物架和室内光线全片稳定,不改变空间布局;全片只有同一名女主和同一名男主,不增加店员、顾客或路人,人物不重复、不分裂、不换脸、不换装,手指数量和杯子结构保持正常。最终呈现写实电影级画质,具有真实自然的皮肤细节、头发运动、布料褶皱和陶瓷材质,人物动作连续,口型准确,手部结构稳定,光影方向统一,空间关系清楚,无人物变形、无道具穿模、无数字修饰感。 |

来看看最终生成的效果。女主近景、男主近景,再到最后的双人全景,三个机位基本都按照我在预演台里设置的时间完成切换,人物位置和空间关系也没有明显跑偏。
为了看得更直观,我也把白模预演和最终成片放在一起做了对比。可以看到,除了人物和场景被替换成真实画面,机位、构图和切换节奏基本都保留了下来。
我还做了一个有白模参考和无白模参考的效果对比。
对比后能明显看到:在提示词完全不变的情况下,去掉白模参考后,生成结果中的镜头切换开始偏离预期,部分机位和构图也出现了变化。
案例三:复杂镜头,环绕跟拍
第三个案例,我准备做一段海边公路上的散步镜头,看看预演台能不能准确还原先环绕跟拍、再固定机位看人物走远的复杂运镜。
首先上传场景图片,生成白模。

白模完成后,我添加了人物并画了运动轨迹,让人物跟着轨迹行走,在添加了摄像机,让摄像机沿着人物做旋转跟随运镜。
完成后,点击右上角点击录制/全局录制。桌面就会添加一个刚刚做的白模视频动画。

然后新建视频节点,把角色、场景和刚刚做的预演台录制的视频,连接到新建的视频节点,设置好模型、时间和比例,并输入提示词:
1 | 视频1是唯一的人物运动、空间位置、镜头轨迹和起止构图参考;图1是女孩的唯一角色参考;图2是海边公路的唯一场景参考。用图1中穿浅蓝色连衣裙的女孩替换视频1中的红色白模人物,严格保持她的面孔、发型、服装和鞋子一致。按照视频1中的原始轨迹,将人物和场景自然生成一段15秒写实视频。不得改变人物行走方向、速度、起始位置和镜头环绕方向。女孩独自在清晨的海边公路上悠闲散步,步伐平稳放松,双臂随步伐自然摆动。她全程保持正常散步速度,不奔跑、不突然停下、不回头、不看镜头。海风轻轻吹动她的头发和裙摆,动作自然克制。0—10秒:镜头跟随正在散步的女孩,以她为中心,严格按照视频1的方向和速度平稳环绕一整圈。镜头依次经过人物侧面、正面、另一侧和背面,环绕过程中始终保持女孩为画面主体,人物持续沿公路向前行走。10—15秒:完成环绕后,镜头在视频1对应位置平稳停下并完全固定,不再跟随、不再平移、不再旋转、不推拉变焦。女孩继续背对镜头沿公路走向远处,身体在画面中自然变小,最后在公路远端逐渐隐入远景;不能突然消失,不能使用淡出特效。全程一镜到底,不切镜、不跳帧、不改变机位高度。写实生活电影质感,真实海边公路材质,清晨柔和阳光,空气通透,色彩自然。保留轻微脚步声、海浪声和海风声;无对白、无旁白、无音乐、无字幕、无文字、无水印、无车辆、无其他人物。 |

然后就得到了下面的视频效果。
总结
通过这次测试下来,我感受是,updream 预演台确实能让复杂镜头得到更好控制。人物站在哪、镜头怎么走、什么时候切换,都可以先用白模搭出来,比单靠提示词反复抽卡直观很多。
整个过程也让我学到了一些镜头语言,比如怎么运镜,有哪些运镜方式。有那么一刻,让我觉得我真的就是导演一样。
另外,updream 正在举办「预演台:白模创作千万积分挑战赛」,8月17日至8月30日开放投稿,设有作品展示和教程分享两个赛道,还有奖励积分拿。
注:文中涉及的图片和视频结果为结合 AI 工具与人工判断完成的个人使用记录,仅代表个人体验。
朋友们,下一期见!拜拜!




