Adobe 最近宣布了一个重磅消息：他们将把 Firefly 视频模型（也就是 AI 生成视频）引入到 Adobe Premiere Pro 和 Firefly 生成艺术服务中。不过，与 Adobe 的生成式 AI 图像功能不同，这次的视频生成服务并不免费。
其实，AI 生成视频已经不是什么新鲜事了。早在 2023 年 12 月，OpenAI 就推出了 Sora，它可以根据文本提示生成几秒钟的 AI 视频片段。但 Adobe 的优势在于“真实性”。就像 Firefly 和 Photoshop 中的 AI 生成图像一样，Adobe 的 Firefly 视频模型是基于授权视频片段进行训练的，这使得生成的内容更加可靠。
目前，Adobe 将 AI 生成视频片段定位为 B-roll（补充镜头）。比如，它可以作为标题背景的填充视频，或者用于两个不同场景之间的过渡。在一次向媒体展示的演示中，Adobe 展示了一个 AI 生成的视频片段：红色火花在屏幕上飞舞，作为介绍冰岛视频片段的标题背景。然而，Adobe 也展示了一个完全由 AI 生成的“无人机飞行”视频，背景是一座正在喷发的火山。这表明，观众可能仍然需要对所看到的内容的真实性保持怀疑。
Adobe Firefly 模型将支持生成并下载视频。在 Premiere Pro 中，就像在 Photoshop 中一样，用户可以在应用程序内直接生成 AI 内容，并将其轻松融入工作流程。
不过，使用 Adobe Firefly 视频模型需要付费。Adobe 提供了两种早期访问计划。9.99 美元的 Firefly 标准计划每月提供 2,000 个视频积分，相当于最多 20 个五秒的 1080p 视频。而 Firefly Pro 计划则允许用户每月通过 7,000 个视频/音频积分创建 70 个五秒的 1080p 视频。Adobe 还表示，针对那些“定期生成视频内容”的用户，即将推出 Firefly 高级计划，但定价尚未公布。
这些计划听起来可能有些复杂，但本质上，用户是用积分来“购买”视频。据 Adobe 代表解释，除了生成视频外，用户还可以编辑视频，比如添加滤镜、创建相机路径以生成运动镜头等。创意人员还可以锁定片段的首尾图像以方便过渡，并调整颜色以保持与其他场景片段的一致性。这些功能似乎不会消耗积分。
不过，目前尚不清楚编辑和重新渲染之间的界限在哪里，而重新渲染是会消耗积分的。值得注意的是，Adobe 并不会通过 AI 生成音频，而是提供将预先录制的音频翻译成 20 种语言的服务。Adobe 承诺，其翻译将保持“真实的声音”，包括语音、语调、节奏和音效匹配。
AI 生成视频的计算强度远高于 AI 生成静态图像，因此 Adobe 收取更多费用也在情理之中。Adobe 已经为 AI 图像使用了积分系统，而 Firefly 仅为其应用程序的免费版本用户分配了 25 个图像生成积分。对于视频模型，Adobe 尚未允许用户通过免费层级试用 Firefly 视频模型。
目前还不清楚用户是否会“消耗”任何可用积分，还是仅用它们来购买视频创作时间。不过，Adobe 在这一领域确实面临竞争。通过云服务创建 AI 生成视频是可行的，例如 Sora、Pika Labs、Runway 等服务。像 Invideo.ai 这样的服务还提供从头开始创建整个视频片段的帮助，使用 AI 生成的片段（以及库存图像）和 AI 生成的脚本。
在本地 PC 上自行创建 AI 视频似乎也是可能的，但难度较大。根据文档，Mochi 需要 60GB 的显存才能从本地 PC 生成 480p 视频，这超过了英伟达 GeForce 5090 创始版的 32GB 显存。其他竞争产品似乎也没有更好的表现。
本地 AI 视频模型似乎也难以从文本提示生成视频片段，而不是参考图像。Adobe 的 Firefly 模型可以做到两者兼顾。在本地 PC 上运行像 Stable Diffusion 这样的 AI 生成器，对于 AI 生成的静态图像似乎相当可行，但 AI 视频可能需要依赖云服务来生成这一代 PC 的内容。
Adobe 通过其云服务提供了这种强大的功能。从长远来看，便捷性可能是真正的卖点。虽然 Adobe 的 Firefly 服务为 AI 艺术提供了一种即取即用的方法，但正是其与 Photoshop 的简单、紧密集成使其特别有用。
