IT之家2月12日消息,字节跳动旗下生成式人工智能(885728)创作平台即梦AI今日宣布正式接入最新视频生成模型Seedance2.0与图片生成模型Seedream5.0lite(LITE)。
IT之家附官方对两款模型的具体介绍如下:Seedance2.0:全新多模态创作体验
从开始使用文字和首/尾帧“讲故事”的那天起,我们就想做出一个真正听得懂你表达的视频模型。现在,它真的来了!
Seedance2.0能够支持图像、视频、音频、文本四种模态输入,表达方式更丰富,生成也更可控。
你可以用一张图来说明自己想要的画面风格,用一个视频指定角色的动作和镜头的变化,用一段音频表达预期的节奏和氛围……“提示词”开始不再局限于文字,创作过程变得更自然、更高效,也更像真正的“导演”。
你可以用一张图,开启一个故事。也可以参考视频的动作、运镜,实现一个全新的内容。
Seedance2.0支持最多9张图片、3段视频(总时长不超过15秒)、3段音频(MP3格式,总时长不超过15秒)以及自然语言输入,混合输入总上限是12个文件,最长可生成15秒时长。
这次升级中,“参考能力”是最大亮点:参考图像可精准捕捉画面构图、角色细节;参考视频支持镜头语言、复杂的动作节奏、创意特效的复刻;视频支持平滑延长与衔接,可按用户提示生成连续镜头,不止生成,还能“接着拍”;编辑能力同步增强,支持对已有视频进行角色更替、删减、增加。
我们知道,视频创作的目标从来不仅是“生成”,更是对表达的控制。Seedance2.0不仅是支持多模态输入,更将提供一种真正可控的创作方式。
需要提醒大家的是,Seedance2.0目前暂不支持输入含真人的照片/视频作为主体参考。如果你也想要在故事“出镜”,可以使用即梦APP,录制本人形象与声音完成真人校验后,就能创建属于自己的数字人分身,还可以授权朋友使用你的分身,一起在无尽的故事里出镜。Seedream5.0lite(LITE):会上网的图片生成模型
图片模型也有新的突破。最新上线的Seedream5.0lite(LITE)具备联网实时检索、编辑精准可控、智能逻辑推理三大亮点,让每一个需求都能及时响应、准确呈现。在即梦图片生成功能选择“图片5.0Preview”即可体验该模型。
模型首次支持检索生图功能,让创作与热门资讯话题深度绑定。
生成图像与输入文本的契合度也大幅提升,能够更加精准地响应文本细节指令;在影视海报、社媒封面、营销海报、多字传单、艺术海报、知识图谱、UI设计等场景均有较大提升。
Seedream5.0lite(LITE)内置生物科学、建筑设计等垂直行业专业知识库,更懂现实规律,支持复杂的逻辑推演与多步推理需求。
即梦AI将首发上线Seedream5.0lite(LITE)2K、4K清晰度,目前还有专属限时免费活动:即日起至2月28日,2K生图全员限免,4K生图会员限免。
