9月24日,在深圳举办的 AI 创新巡展上,字节跳动旗下火山引擎推出了两款视频生成大模型,分别是豆包视频生成-PixelDance 和豆包视频生成-Seaweed。

简单总结一下两个AI视频模型各自的特点:
PixelDance:DiT 结构;支持文生视频和图生视频;时长最长10秒;精准的语义理解;极其灵活的运镜,支持多风格多尺寸;支持一致性多镜头;可用于影视创作,广告传媒,短视频,直播,电商等多个场景。
Seaweed:Transformer结构;支持文生视频和图生视频;默认时长5秒,并可动态延长至20-30秒;可生成影视级视频,逼真度极高;色彩专业,运动自然;可以应用于电商营销、城市文旅宣传、动画教育、短剧等广泛的应用场景。
PixelDance功能简介
一、精准的语义理解能力:目前市面上的竞品大多只能完成简单指令单一动作,而PixelDance V1.4可以遵从复杂prompt,解锁时序性多拍动作指令与多个主体间的交互能力。
prompt:特写一个中国女人的面部。她有些生气地戴上了一副墨镜,一个中国男人从画面右侧走进来抱住了她。
二、多风格、多比例兼容视频生成:深度优化后的Transformer结构,大幅度提升了视频生成的泛化能力,支持包括黑白、3d动画、2d动画、国画、水彩、水粉等多种风格,包含1:1、3:4、4:、16:9、9:16、21:9六个比例。
Seaweed功能简介
一、逼真度极高: Seaweed能够生成影视级的视频,具备丰富的细节层次。
二、视觉美感高:专业级色彩调和和光影布局,大幅提升画面视觉审美
三、丰富的应用场景:seaweed支持生成具备高级视觉美感与丰富细节层次的视频,能够将用户的文本、图像转化为高质量的视频作品。可以应用于电商营销、城市文旅宣传、动画教育、短剧等广泛的应用场景。
申请方法:
内测申请地址1:
https://console.volcengine.com/
登录上网址之后,找到火山方舟-视觉模型-立即申请体验,个人用户企业名称处填写为无,就可以申请了:



内测申请地址2(即梦 AI):
https://bytedance.larkoffice.com/share/base/form/shrcnTPmPPxn9j6bw2AH3kdP6Fd