多模态进化
lytai docs
本页内容

多模态全面升级:视频创作进入“自由组合”时代!

Seedance 2.0 多模态介绍

  • 支持上传文本、图片、视频、音频,这些素材都可以被用作使用对象或参考对象。你可以参考任何内容的动作、特效、形式、运镜、人物、场景、声音,只要提示词写得清楚,模型都能理解。
  • Seedance 2.0 = 多模态参考能力(可参考万物) + 强创意生成 + 指令响应精准(理解力很棒)
  • 用自然语言描述你想要的画面和动作就可以啦,明确是参考,还是编辑~素材多的时候,建议你多检查一下各个 @对象有没有标清楚,别把图、视频、角色搞混了哦

特殊使用方式(不设限,仅供参考):

  • 有首帧/尾帧图?还想参考视频动作? → 提示词中写清楚,如:“@图1为首帧,参考@视频1的打斗动作”
  • 想延长一个已有的视频? → 说明延长时间,如“将@视频1延长 5s”,注意:此时选择的生成时长应为“新增部分”的时长(例如延长 5s,生成长度也选 5s
  • 想融合多个视频? → 提示词中说明合成逻辑,如:“我要在@视频1和@视频2之间加一个场景,内容为xxx”
  • 没音频素材?可以直接参考视频里的声音
  • 想生成连续动作? → 可以在提示词中加入连续性描述,如:“角色从跳跃直接过渡到翻滚,保持动作连贯流畅”@图1@图2@图3…

那些一直很难做的视频问题,现在真的能搞定了!

做视频总会碰到一些让人头疼的地方:比如人脸换了、动作不像、视频延长不自然、改着改着整个节奏都变了……这次多模态能把这些“老大难”问题一口气解决了,下面就是具体的使用案例👇

一致性全面提升

你可能遇到过这些烦恼:画面里人物前后长得不一样、商品细节丢了、小字模糊、场景跳变、镜头风格无法统一……这些在创作中常见的一致性问题,现在在 2.0 中 都能被解决。从人脸到服装,再到字体细节,整体一致性更稳、更准

Case 1

AI Showcase

Source Assets

Asset 1
IMG

Generation Prompt

男人@图片1下班后疲惫的走在走廊,脚步变缓,最后停在家门口,脸部特写镜头,男人深呼吸,调整情绪,收起了负面情绪,变得轻松,然后特写翻找出钥匙,插入门锁,进入家里后,他的小女儿和一只宠物狗,欢快的跑过来迎接拥抱,室内非常的温馨,全程自然对话

Output Result

Ready

Case 2

AI Showcase

Source Assets

VID

Generation Prompt

将@视频1中的女生换成戏曲花旦,场景在一个精美的舞台上,参考@视频1的运镜和转场效果,利用镜头匹配人物的动作,极致的舞台美感,增强视觉冲击力

Output Result

Ready

Case 3

AI Showcase

Source Assets

VID

Generation Prompt

参考 @视频1的所有转场和运镜,一镜到底,画面以棋局为起始,镜头左移,展示地板的黄色沙砾,镜头上移来到一个沙滩,沙滩上有足印,一个穿着白色素衣的女生在沙滩上渐行渐远,镜头切到空中的俯拍视角,海水在冲刷(不要出现人物),无缝渐变转场,冲刷的海浪变成飘动的窗帘,镜头拉远,展示女孩的面部特写,一镜到底

Output Result

Ready

Case 4

AI Showcase

Source Assets

Asset 1
IMG

Generation Prompt

0-2秒画面:快速四格闪切,红、粉、紫、豹纹四款蝴蝶结依次定格,特写缎面光泽与 “chéri” 品牌字样。画外音“Chéri 자석 리본으로 무궁무진한 아름다움을 연출해 보세요!” 3-6秒画面:特写银色磁吸扣 “咔嗒” 吸合,再轻轻一拉分开,展示丝滑质感与便捷性。画外音“단 1초 만에 잠그고, 최고의 스타일을 완성하세요!” 7-12 秒画面:快速切换佩戴场景:酒红款别在大衣领口,通勤氛围感拉满;粉色款绑在马尾,甜妹出街;紫色款系在包带,小众高级;豹纹款挂在西装领,辣妹气场全开。画外音“코트, 가방, 헤어 액세서리까지, 다재다능하고 개성 넘치는 스타일을 완성하세요!” 13-15秒画面:四款蝴蝶结并排陈列,品牌名 “chéri, 당신에게 즉각적인 아름다움을 선사합니다!”

Output Result

Ready

Case 5

AI Showcase

Source Assets

Asset 1
IMG
Asset 2
IMG
Asset 3
IMG

Generation Prompt

对@图片2的包包进行商业化的摄像展示,包包的侧面参考@图片1,包包的表面材质参考@图片3,要求将包包的细节均有所展示,背景音恢宏大气

Output Result

Ready

Case 6

AI Showcase

Source Assets

VID
Asset 2
IMG
Asset 3
IMG
Asset 4
IMG

Generation Prompt

把@图片1作为画面的首帧图,第一人称视角,参考@视频1的运镜效果,上方场景参考@图片2,左边场景参考@图片3,右边场景参考@图片4。

Output Result

Ready