跳到正文
ElevenLabs· Renee Zhang·· 9 小时前精选

ElevenLabs 在 ElevenCreative 推出 Instant Soundtracks

Introducing Instant Soundtracks

AI 导读

ElevenLabs 在 ElevenCreative 上线 Instant Soundtracks,上传视频后模型会生成原创配乐,并分析画面中的音效触发点,按时间戳生成音效并自动放到时间线上。

推荐理由

原文给出 Instant Soundtracks 的生成流程与 API 参数,可据此判断视频配乐与音效的自动化程度。

正文 · AI 翻译

在 ElevenCreative 中为你上传的任何视频生成配乐和同步音效。

在 ElevenCreative 中为任何视频添加音乐和音效

使用 Instant Soundtracks,在生成配乐的同时生成音效,为你上传到 ElevenCreative 的任何视频增色。今天发布的 ElevenCreative 新版本允许你上传视频,模型会为其配上原创音乐,然后分析画面中的音效提示点,并生成与这些时间戳对齐的音效。

这些生成的音效会自动放置在时间线上,与视频匹配。模型会观看视频,找出需要音效的时刻,并将每个音效放在正确的时间戳上,例如,在广告结尾处为 logo 配上嗖声。

今天的更新还为短视频内容带来了更好的时间把控,以及跨场景更准确的情绪切换。你现在还可以使用视频的现有音频作为新配乐的参考。模型可以分析音频——例如其流派、渐强、每分钟节拍数或配器——并据此塑造新的配乐。结果是音乐与原作的风格相符,而不是完全从零开始。

在编辑器中持续精修

在 ElevenCreative 音乐视频编辑器中,音效以独立图层显示,因此你可以独立于配乐查看和调整它们。你还可以添加更多音效、调整时间、替换音乐,或精修个别时刻,而无需从头开始。当你对作品满意时,可以直接从 ElevenCreative 导出。

更好的短视频时间把控,更多控制

Instant Soundtracks 专为短视频的节奏而设计,在剪辑点、转场和屏幕动作周围有更紧凑的时间把控。它还可以在场景之间切换音乐的情绪。例如,如果氛围从快节奏场景转变,背景音乐可能是 EDM 或 R&B,但随后转为原声吉他,以适应更缓慢、更私密的场景。

今天已在 ElevenCreative、ElevenMusic 和 API 中可用

Instant Soundtracks 今天即刻可用。以下是访问方式:

  • ElevenCreative 音乐标签页中的音乐视频编辑器,音效作为独立图层,并带有以音频为参考的控制项。
  • Creative Engine,用于为广告添加音乐和音效。
  • The ElevenMusic 平台  
  • ElevenCreative Studio API,使用新参数:add_sfx、separate_tracks 和 use_audio_as_reference。

当 separate_tracks=true 时,API 会返回一个 .ZIP 文件,其中音乐和 SFX 作为单独文件,因此你可以在自己的下游流程或 Studio 中混音。

每次请求最多支持 10 个视频,合计最大 200 MB 和 10 分钟视频。

立即开始为你的下一个视频添加音乐和音效。

来源:ElevenLabs · elevenlabs.io