阶跃星辰再发力!开源图生视频模型引领创作新潮流,3月20日大消息:阶跃星辰图生视频模型震撼登场

阶跃星辰于3月20日开源的图生视频模型Step-Video-TI2V,阐述了该模型的特点、优势,包括支持生成特定分辨率视频、具备运动幅度和镜头运动可控等能力,还提及了它与华为昇腾计算平台的适配情况、上线平台,以及后续在特效生成方面的发展计划。

3月20日传来一则令人瞩目的消息。早在今年2月,阶跃星辰就已经开源了两款Step系列多模态大模型,分别是Step – Video – T2V视频生成模型和Step – Audio语音模型。而在今日,阶跃星辰再度发力,继续开源了一款图生视频模型——Step – Video – TI2V。

这一图生视频模型可不简单,它是基于30B参数的Step – Video – T2V训练而来。它支持生成102帧、时长为5秒、分辨率达540P的视频。更为突出的是,它具备两大核心特点:运动幅度可控和镜头运动可控,并且天生就拥有一定的特效生成能力。

阶跃星辰再发力!开源图生视频模型引领创作新潮流,3月20日大消息:阶跃星辰图生视频模型震撼登场

阶跃星辰表示,和目前现有的开源图生视频模型相比,Step – Video – TI2V有着显著的优势。在参数规模上,它为该领域的研究提供了更高的上限。而其运动幅度可控能力,更是能够巧妙地平衡图生视频生成结果的动态性和稳定性,为广大创作者提供了更为灵活的选择。

与此同时,Step – Video – TI2V已经完成了与华为昇腾计算平台的适配工作,并且在魔乐社区(Modelers)正式上线,方便用户使用。

下面为大家详细介绍Step – Video – TI2V的核心特点:

1、运动幅度可控:动态 & 稳定自由切换

Step – Video – TI2V支持对视频的“运动幅度(motion)”进行控制,这样就能很好地平衡图生视频内容的运动性和稳定性。不管创作者需要的是静态稳定的画面,还是高动态的动作场景,它都能够满足需求。

2、多种运镜控制

除了可以对镜头内主体运动进行控制之外,Step – Video – TI2V还支持对多种运镜的理解。它能够对生成视频中的镜头运动进行精准控制,从而生成大片级的运镜效果。无论是基本的推拉摇移、升降,还是各种复杂的电影级运镜效果,它都能轻松驾驭。

3、动漫效果尤佳

在动漫类任务上,Step – Video – TI2V的效果表现得尤为优异,非常适合动画创作、短视频制作等应用场景。

4、支持多尺寸生成

Step – Video – TI2V支持多种尺寸的图生视频。不管是横屏带来的宽阔视野,竖屏的沉浸体验,还是方屏的经典复古风格,它都能轻松应对。用户可以根据不同的创作需求和平台特性,自由选择图片尺寸,完全不用担心画面变形或比例失调的问题。

目前,Step – Video – TI2V模型已经正式开源,在阶跃AI网页版和App端均已上线,方便用户使用。

此外,Step – Video – TI2V现在已经初步具备了一些特效生成能力。未来,阶跃星辰还将通过LoRA等技术,持续挖掘并解锁该模型的特效潜力,为创作者带来更多惊喜。

模型及技术报告链接:

GitHub:

Github – ComfyUI:

技术报告:

本文围绕阶跃星辰开源的图生视频模型Step – Video – TI2V展开,介绍了其背景、特点、优势、适配情况、上线平台等信息。该模型具有运动幅度可控、多种运镜控制、动漫效果佳、支持多尺寸生成等优点,且已正式开源,未来还将在特效生成方面持续发展,有望为创作者提供更多优质选择和创作便利。

原创文章,作者:Megan,如若转载,请注明出处:https://www.yanghehb.com/1627.html

(0)
MeganMegan
上一篇 2025年3月20日
下一篇 2025年3月20日

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注