免费长视频制作神器,看看真实效果如何#AI视频#AI剪辑#AI神器

之前在ai圈疯狂刷屏的frame pack,到底是真的像人说的那样重新定义了a i长视频,还是有点过于吹捧的呢。来咱们先看一下,对比同一张图片,同一套提示词,这是图片视频天花板可零a i一点六模型的效果啊。注意看人物侧身的手臂有点扭曲变形了,这个是可零二点零的效果。啊,进步非常的明显,而这个就是咱们今天的主角frame pack的效果。但是从这个片段来看啊,确实相当不错,已经相当接近可零二点零的效果了。

但更厉害的是啊它还能够一次生成两分钟的超长视频,最最关键的是,它还完全免费。free pack的开发者其实就是control night背后的张灵敏。大神这个名字的含金量相信不用我多说了吧。大神这次依旧非常慷慨的开源了这个模型,大家不仅可以免费使用,而且由于模型采用了独特的技术结构,配置的要求还变得非常的低显存在。六g以上的三零四零五零系显卡都可以本地部署运行,你甚至可以在一台六g显存的笔记本上跑起来啊。

可惜的是啊一零二零系显卡虽然官方没有测试,但从社区的反馈来看,大概率是不支持的。frame pack这个项目最近在ai上的讨论度啊非常夸张啊,甚至有不少人说他重新定义了a i长视频。因为它解决了做长视频的两个致命问题,健忘和跑偏。ai在生成长视频的时候啊,跑着跑着很容易就忘了前面的内容,导致后来的画面跟前面接不上。比如人物的造型突然就变了,或者场景前后不一致,这个就叫做健忘。

另一方面,视频越长,画面就跟复印件一样,越复印越模糊。a i一帧一帧的往后生成画面,每一帧都有可能出现一点点的小错误。这些错误积累起来,越往后就变得越奇怪了,最后就跑偏了。所以现在很多的视频大模型都只支持生成几秒钟的短视频,而frame pack就聪明多了。它的核心在于两点,一是智能压缩记忆,它不会对所有过去的画面一视同仁,而是重点看最近的、远处的,只抓关键信息,这样无论你的视频有多长,它需要处理的信息总量都是固定的。

二是配合了巧妙的倒叙生成方式,让ai朝着一个高质量的目标去生成,减少错误积累。所以fm pack在生成长视频和保持画面一致性这两点上确实做得非常出色,这也是它爆火的主要原因。啊,但是注意啊,我要说但是了。我在实际的使用当中也发现了fink pack目前还存在着一些比较明显的短板。第一就是它的镜头调度相对单一。

你会发现很多生成的视频虽然长而且稳,但是背景变化不大,不支持复杂的运镜,感觉摄像机像是被定住了一样,缺少动感和电影感。第二,提示词的遵循度有待提高。对于复杂一点的描述啊,比如说包含几个物体互动或者是精细动作的提示词啊,free ta k目前理解起来还是比较吃力的,人物很容易就在原地罚站啊,或者做一些很奇怪不连贯的动作。第三,视频开头的动作偏慢啊,尤其是前几秒钟,人物或者场景的动态往往显得有些迟缓,不够自然流畅啊。所以总的来说呢,我的看法是framework作为一款开源技术,在长视频生成和一致性上展现了巨大的潜力啊,尤其考虑到它的低门槛和免费的特性,绝对是里程碑式的进步。

但要说它的真实效果已经全面超越或者媲美像可怜这种顶级的闭源模型,那目前来看还是有点言过其实了。简单来说就是free pack现在强在长和稳以及开源免费,但在精和准这上面。还有很长的路要走,但正是因为开源,它的未来才更加值得期待。毕竟可能十秒二十块的单价,一般人还真的消费不起。啊,说了这么多,那么我们具体应该怎么样去使用frapp呢?啊,非常简单,首先我们需要上传一张图片素材,接着在下方填写提示词。

这个项目是支持中文提示词的啊,不过我测试下来感觉还是英文的适配性更好一些。如果你不是特别擅长写提示词的话,可以在github主页直接复制官方的模板发送给g p t。最后把你的图片素材再发给他啊,他就会生成一段适用的英文提示词,把提示词粘贴到项目里面。接着我们来看下面勾选这个t cash能够提升视频的生成速度。去掉勾选会稍微提升一点的产品质量,但也不是特别的明显,所以我建议大家默认勾选它。

这个是生成视频的时长,目前最高支持一百二十秒啊,真的非常的夸张。其他的几个参数我们保持默认就好了,直接点击生成,生成的速度这里给大家一个参考。特定九零九九七cash的话,大概每周是一点五秒,也就是说十秒钟的视频需要八分钟左右。虽然生成的时间是长了一点啊,但还是那句话,它免费开源,而且就在官方团队休。下来这几天啊,社区的大佬们已经开始给项目添砖加瓦了。

比如加入了首尾帧的功能,提前确定头尾图片,能够极大提升可控性。还有这个时间戳功能,可以通过在每行提示词的前面打上时间戳,去精准的控制动作触发的描述。另外还有一些手动调整视频分辨率及cache数值等小功能,这里就不做详细说明了。我会把一键包的地址放在评论区,大家可以自己上手体验一下。最近真的冒出来好多优秀的开源视频模型,能够看出来a i的技术真的是在以飞快的速度发展。

相信用不了多久,咱们普通人也能够利用a i轻松制作出以前那些需要庞大设备复杂流程才能够实现的百万镜头了啊。所以感兴趣的朋友们赶紧学起来啊,咱们一起进步。大家还有什么想了解的内容,欢迎在评论区告诉我,别忘了点赞、投币、收藏、关注啊,给我一点动力。好的,这里是好奇实验室,我们下期视频再见。