可以生成无限时长的视频生成模型终于来了!
这就是,昆仑万维刚刚重磅开源的,
支持无限时长生成的的高质量电影生成模型Skyreels-V2和多主题视频模型SkyReels-A2,两款模型评分直接稳坐开源界的SOTA宝座。
AI视频不用受限于闭源,高成本和有限时长了?!我一个鲤鱼打挺,必须看看怎么个事。
有幸提前拿到内测,体验到的功能有:视频首尾帧、视频无限延长、效果lora训练、多主体参考、口型同步、甚至支持一键生成短剧故事板。
这是默默无闻的把市面上能用的功能都一股脑都给上全了啊。
SkyReels:www.skyreels.ai/home
SkyReels-V2开源:github.com/SkyworkAI/SkyReels-V2
上次我们测过了昆仑开源的AI音乐生成模型,那效果直接给我玩嗨了:
我用Mureka让伍佰唱《爱你》,小白也能玩的AI音乐版DeepSeek
这有新模型,我第一个开测,和大家一起看下,效果表现如何!
网站上体验的基础视频生成功能,可以一次性生成5s、10s、30s镜头。
要知道30s是目前AI视频产品能生成的最长单镜头时间,也是SkeyReels的独家功能,更长的视频可以到Extend功能中进行无限延长。
目前SkyReelss支持 16:9 和 9:16的视频比例,拥有首尾帧生成功能。
先来几个视频看下效果,然后咱们再测试30s:
视频的画质很清晰,动物的动作都很符合真实世界的运动规律,10s的视频画面细节处都照顾的很到位,没有什么出错的地方。
人物的镜头我也测了几个:
人物的动作和表演都还蛮自然的,和环境的互动也很好,仔细看第一个视频里的男人是有按到琴弦的,而且一直以来AI视频经常出现的手部崩坏昆仑都没有出现。
最后一个视频对于我给的提示语中的“喝茶然后防线茶杯露出微笑”的连续动作展现的也很好。
那我们再来看个一次性生成30s的镜头:
例如这个海底遨游的case,从沉船外到沉船内过渡展现的很好,而且前后画面一致性很强:
这个功能我要重点提!上面我有说到,在基础的视频生成中可以一口气生成5s、10s、30s的视频,
然后我们可以将已经生成后的视频在Extend中进行单次5s的延长,不限制次数,这样我们就可以生成无限长的视频。
先放一个40s的例子:
刚看到这个功能的时候我会比较担心,一旦视频不断延长,随着延长生成的次数的增加,视频会产生或多或少的崩坏,
但体验下来,昆仑的效果还是很稳定的,可以保持画面细节的同时,稳定不崩的持续生成下去。
这个狐狸,40s这么长的视频中它的动作和腿部都没有出现问题。
再例如这个海底的case,每一条鱼的出现和消失都是合理的,没有出现以往AI视频常出现的某个元素突然消失融合扭曲的毛病:
还有我尝试了一下,可以在不断延长视频时通过提示语来控制人物的情绪变化:
情绪过渡都很自然,没有进行过任何剪辑拼接,都是通过Extend直接完成视频延长生成,这个功能真的是非常非常厉害了,
而且昆仑应该是目前头一份可以做到这个程度的。
时长不设限给创作者们可操作的空间就更大,dream一个可以上传自己素材。
这个功能也很有意思,我们可以上传10-20个拥有相同效果的5s视频作为素材,训练一个自己想要的效果或者动作lora,然后应用到后面的视频中。
我直接整了10个野马分鬃的动作素材,炼了一个太极拳lora:
生成好之后我们会得到六个效果,可以选择其中一个进行下一步test:
然后我们就可以获得,全民打太极拳系列:
实在是太好玩了!如果之后有什么抽卡抽不到的动作或者效果,完全可以全都丢进昆仑炼一炼,再也不用等一个不确定的可能了。
昆仑这次还有多主体参考功能,支持上传4张以内的图片,然后通过提示语固定画面展现的内容,比如说我上传了这三张图:
生成以后得到的效果:
元素融合都很合理,人物、道具以及场景的复现都不错,转身动作也蛮自然,再看看更多的例子:
最后,昆仑还有一键生成剧本、角色、故事板分镜,分镜生成视频功能,
体验了一下,整个过程很流畅,中间步骤不会有卡顿的地方,分镜人物角色的一致性还可以:
中间的各个步骤也都支持随时修改,感觉一键生成短剧的未来马上就要到来了。
这功能真的太全了,全到我都有点写不过来,
而且个个效果都可以,昆仑还是够全面的,
距离上次开源Skyreels-V1,才仅仅过去了不到两个月的时间,
最重要的是,这次又开源了!
这波操作既降低了AIGC的创作门槛,
又推动了整个视频生成领域的进化速度。
好样的,昆仑!
文章来自于微信公众号 “卡尔的AI沃茨”,作者 :阿汤 & 卡尔
【开源免费】suno-api是一个使用监听技术实现了调用suno功能,并封装好API的AI音乐项目。
项目地址:https://github.com/gcui-art/suno-api