五分钟跑通SVD：Runway的免费开源平替

2023年11月27日，今天我终于把Stability新开源的视频大模型跑通了——没租没等，直接在云上几分钟出片，先把过程记下来。

前几天，AI届开源先锋Stability终于对视频下手了。他们在开源了AI绘图大模型（大名鼎鼎的Stable Diffusion）和AI文本大模型（Stable LM）之后，终于集齐了自己的全部多模态，开源了AI视频大模型Stable Video Diffusion。效果还非常离谱，很强，非常强，甚至在很多方面可以直接对标Runway和PIKA。重要的是，它不要钱。

但是其性能超高的要求，直接把大部分人拒之门外，当然也包括我（笑）。毕竟不仅要各种部署，还要20G显存起步的玩意，真不是普通人能玩得起。所以我一直在等，等那种有手就行、还不需要显卡可以上云的项目，直到我在老朋友仙宫云上看到有个大佬做了这么一个镜像。春天来了。

流程记一下：打开仙宫云（https://www.xiangongyun.com/register/V76GG5），正常去租一张4090的卡，然后在社区镜像这块搜索SVG，选择第一个2毛钱1小时的。虽然作者要收费，但这个价格相比Runway的使用成本还是低了不少。然后直接部署，大概几秒钟后就部署好了，点开右边的WebUI按钮，就能看到SVD的页面。

非常简单，直接把图拖到顶部，然后点击启动，下面就可以直接生成视频了。需要注意的是，图片只支持1024*576的尺寸，所以一定要只扔这个尺寸的图进来。大概70秒以后，就可以得到你的4秒视频了。比如我的这个火箭，极其轻易地就实现了RunwayGen2之前死活做不了的火箭升空画面。再记几个用SVD做的例子：水杯、人物、光影那几组，出片的质感都对得起"开源"这两个字。

但是SVD强归强，也不是万能的：尺寸有限制，不支持摄像机运动，可控性较差，清晰度较差。但是嘛，AI这玩意，你懂的。能列出来的这些已经被前辈Runway解决的问题，那都不叫问题，估计要不了两个月，就能看到翻天覆地的变化。同时，Stability自己也快出他们的在线AI视频生成工具了，可以去排队一下，地址：https://stability.ai/contact

等在线版上线，我应该就再也不用惦记显存这回事了。