Adobe使用AI为视频生成音效

制作吸引人的视频不仅仅是关于视觉效果。好的视频内容有很大一部分吸引力在于音频效果，但找到（或甚至创建）合适的音频效果可能会是一个耗时的过程。Adobe展示了Project Super Sonic，这是一个实验性的原型演示，展示了未来如何使用文本转音频、物体识别甚至是自己的声音来快速为视频项目生成背景音乐和音效。

更有趣的是Adobe在此基础上增加了两种额外模式来创建这些音轨。第一种模式是使用其物体识别模型，允许你在视频帧中的任何部分点击，创建一个提示然后生成那个声音。这是将多个模型组合成单一流程的一种聪明方法。

真正令人惊叹的时刻来自于第三种模式，它允许你录制自己模仿想要的声音（与视频同步），然后由Project Super Sonic自动生成相应的音频。

Adobe的声音设计AI负责人表示，团队最初是从文本转音频模型开始的，并且他指出，像所有Adobe的生成式AI项目一样，团队只使用了授权的数据。对于语音控制，该工具实际上分析了声音的不同特征和频谱，并使用这些信息来指导生成过程。尽管演示使用的是语音，用户也可以拍手或演奏乐器。

值得注意的是，Project Super Sonic一样是为了展示公司目前正在进行的一些实验性特性。虽然这些项目中的许多最终都会出现在Adobe的创意套件中，但并没有保证它们一定会被采纳。