轰隆隆,轰隆隆,轰隆隆,呼——嗖——,*火焰发射声*。

Generate Sound Effects

Adobe 正在推出新一代生成式 AI 影视制作工具 ,为用户提供创作音效和控制生成视频的全新趣味方式。除了常见的文本提示(通常用于描述 Adobe Firefly AI 模型需要生成或编辑的内容)外,用户现在还能通过拟声词般的语音录音来生成定制音效,并利用参考视频片段来引导 Firefly 生成视频中的动态效果。

即将在 Firefly 应用开启测试的”生成音效”工具,可配合实拍素材与生成视频使用,其音频生成控制能力远超谷歌 Veo 3 视频工具。该工具界面类似视频编辑时间轴,能让用户将创作的音效与上传视频精准同步。例如当用户播放一匹马在路上行走的视频时,可以同步录制”嘚嘚”马蹄声,并辅以”混凝土路面马蹄声”的文字描述,该工具便会生成四种可选音效方案。

这项技术基于 Adobe 在 10 月 Max 大会上展示的 Project Super Sonic 实验项目 。虽然不支持语音处理,但能生成诸如树枝断裂、脚步声、拉链效果等冲击音效,以及自然声响和城市环境音等氛围噪音。

Firefly 文本转视频生成器也将迎来新的高级控制功能。”构图参考”允许用户在上传文本提示时同步上传参考视频,使生成视频能模仿参考素材的构图布局,相比反复输入文字描述更易实现特定效果。”关键帧裁剪”功能支持用户裁剪并上传首尾帧图像,Firefly 可在其间生成过渡视频。新增的样式预设则提供动漫、矢量艺术、黏土动画等多种视觉风格供快速选择。

An image of a hand with red painted nails, reaching for an orange tennis ball, alongside Adobe’s Video AI style presets.
这些样式预设示例可帮助引导 Adobe 的 AI 视频生成输出效果。 图片来源:Adobe

这些风格预设目前仅适用于 Adobe 自家的 Firefly 视频 AI 模型。从我看到的现场演示来看,效果还有待提升——”黏土动画”选项看起来就像是 2000 年代初的 3D 动画效果。但 Adobe 正在持续为其工具添加对竞争对手 AI 模型的支持 ,Adobe 生成式 AI 负责人 Alexandru Costin 告诉 The Verge,未来可能会推出适用于第三方 AI 模型的类似控件和预设。这表明随着 AI 工具日益普及,即便在生成模型本身落后于 OpenAI 和谷歌等公司,Adobe 仍力图保持在创意软件生态链的顶端地位。