最全合集！20个 AI 视频生成产品推荐＆实战教程！

探索AI视频生成：产品、案例与实践

产品概览

　　AI视频生成技术可以按照不同的生成方式分类，主要包括：

• 文生视频：如Runway、Pika labs等。
• 图生视频：如SD + Deforum、SD + Infinite zoom等。
• 视频生视频：包括逐帧生成（SD + Mov2Mov）、关键帧+补帧（SD + Ebsynth）等。
• AI Avatar+语音生成：如Synthesia、HeyGen AI等。
• 长视频生短视频：如Opus Clip。
• 脚本生成+视频匹配：如Invideo AI。
• 剧情生成：如Showrunner AI。

　　此外，还可以从产品阶段和可用维度进行分类，下面将按照这些维度进行产品介绍。

产品介绍与实践

1. Runway

　　Runway由一家总部位于旧金山的AI创业公司制作，其Gen-2代表了当前AI视频领域最前沿的模型。该产品年初在互联网上爆火，能够通过文字、图片等方式生成约4秒的视频。Runway致力于专业视频剪辑领域的AI体验，同时也在扩展图片AI领域的能力。目前支持在网页和iOS访问，网页端提供125积分的免费试用额度（可生成约105秒视频），iOS则有更多额度。

Gen-1与Gen-2的区别和使用方法：

• Gen-1：主要能力包括视频生视频、视频风格化等，仅支持视频生视频是Gen-1和Gen-2的最大差异。使用方法可参考官方教程：Gen-1参数设置。
• Gen-2：主要能力包括文生视频、Prompt+图像生成视频等，使用时可点击顶部的“Start with Image”、“Start with Text”进行操作。建议优先使用右下角的“Free Preview”免费生成多组图片，然后从中选择一张进行视频生成，以节约credits。

　　Runway最近的更新支持将4秒的视频延长，每次延长需要消耗20credits。此外，还支持了1-10级的motion slider调节，以及水平、垂直、空间和旋转的运镜能力。

2. Pika labs

　　Pika labs目前推出了Beta版本，支持免费、不限次数地文生视频和图生视频，但生成的视频会带有官方水印。该产品目前的影响力不如Runway，但其生成效果足以站上AI视频的牌桌。优秀案例包括一位创作者发布的庆祝星球大战100周年的短片。使用方法是在Discord试用Beta版本，输入prompt即可生成视频。此外，Pika labs还提供了文本、图像加密等新功能。

3. Stable Diffusion +

　　Stable Diffusion+是目前最具备可控性的一种AI视频生产方式，但也具备一定的上手成本。通过Nenly同学的保姆级教程和具体工具教程，可以逐步理清思路并进行案例实践。下面对用到的具体插件进行详细介绍：

• Mov2Mov：逐帧重绘工具，原理是提取视频的帧并重新绘制，然后将生成的视频组合成视频并输出。实践过程包括将视频转成帧、选取其中一帧进行风格化、使用mov2mov插件生成视频。
• EbSynth：自动补帧工具，可降低动画制作的时间。实践过程包括手动抽取关键帧、进行关键帧重绘、使用EbSynth补帧并使用AE图片序列转视频。
• Deforum：基于Stable Diffusion的开源项目，可实现复杂的缩放、位移、旋转动画。实践过程包括使用3D控制实现车身偏移效果并添加镜头缩小放大。
• Infinite zoom：基于原图生成高分辨率的无限缩放图像。实践过程包括使用分段提示词控制整体场景和样式。
• AnimateDiff：文/图生视频工具，可实现类似Deforum、Infinite Zoom中的分段提示词能力。实践过程包括安装SD扩展并下载运动模型。

其他产品介绍与实践

　　其他产品包括Synthesia、HeyGen AI、D-ID等AI Avatar+语音生成快速生产视频的产品，以及Opus Clip长视频转短视频工具。这些产品均提供了丰富的功能和案例实践，帮助用户快速上手并生成高质量的视频内容。

未来展望与参考链接

　　当前AI视频生成领域仍面临生成质量不稳定导致的不同帧之间的“闪烁”现象，以及动作扭曲不连贯等技术难题。未来的研究突破方向包括生成更长时序、更高质量的视频；渲染复杂的三维虚拟背景；模仿细微的人类运动和肢体语言；以及实现超高分辨率视频生成等。随着AI能力的增强，AI视频生成技术还拥有很大的进步空间。参考链接包括：关于视频的AI、和AI一起做动画、2023年利用Ai根据文本生成视频技术发展到什么程度了?以及Stable Diffusion喂饭级教学等。