Stability AI 今日發布 Stable Audio 3.0 模型家族，這些模型採用完全授權的資料進行訓練，旨在成為音訊社群未來創新的基礎。其中三個模型為開放權重（open-weight），可供免費下載與開發。

音樂始終透過社群的集體創造力不斷演進。混音文化、改編和混搭是藝術家們在彼此作品基礎上發展並推動藝術形式前進的方式。生成式音訊也將如此。我們希望在音訊領域激發與 Stable Diffusion 推出時在圖像生成領域引發的相同社群驅動創新。

Stable Audio 3.0 是我們對生成式音訊實驗的公開邀請。我們相信最棒的創新仍在等待被創造出來。

在此下載權重：https://huggingface.co/collections/stabilityai/stable-audio-3

認識 Stable Audio 3.0 模型家族

我們發布了四個為不同使用案例和部署選項設計的新模型：

  • Stable Audio 3.0 Small SFX：在裝置上生成音效，例如手機和消費級筆記型電腦。
  • Stable Audio 3.0 Small：在裝置上進行完整的音樂創作。
  • Stable Audio 3.0 Medium：具有更高的音樂性（即結構、旋律連貫性和樂句）和更長的曲目長度，最長可達 6:20。
  • Stable Audio 3.0 Large：家族中最先進的音樂性，專為需要低延遲、高容量生成的音樂平台和創意應用程式而設計。

開放實驗，並擁有您創作的所有權

所有 Stable Audio 3.0 模型均使用完全授權的資料進行訓練。根據 Stability AI 社群授權（Community License），您擁有您的輸出內容，並可自由發布和商業化。

對於年收入超過 100 萬美元的組織，您可以透過我們的企業授權（Enterprise license）獲得商業保障。我們也提供企業授權下的法律賠償。

3.0 Small SFX、3.0 Small 和 3.0 Medium 均為開放權重模型。據我們所知，其他開放音樂模型要麼限制商業使用，要麼承擔因使用未經授權音樂訓練而帶來的風險。

用於變奏和迭代的架構進展

Stable Audio 3.0 是我們的下一代架構，採用新穎的語義聲學自編碼器（semantic-acoustic autoencoder），可實現更長、更靈活的音訊生成。您可以在此閱讀完整的技術論文：https://stability.ai/research/stable-audio-3

變長生成，最長可達六分鐘以上。 Stable Audio 3.0 引入了一種新的變長音訊生成方法，讓您能夠以精確到秒的粒度生成所需內容。

3.0 Small 最長可生成兩分鐘，而 Stable Audio Open Small 為 11 秒，Stable Audio Open 為 47 秒。3.0 Medium 和 3.0 Large 可生成超過六分鐘的內容。

裝置上的完整音樂創作。 據我們所知，3.0 Small 是唯一能夠在裝置上進行完整音樂創作的模型。首次，裝置端和離線音訊生成不再僅限於短樣本；它能夠產生完整的音樂曲目。

支援 LoRa 訓練，可根據個人資料庫客製化模型。 LoRa 是一種高效的微調方法，最初在圖像生成中廣受歡迎，現在正成為客製化音訊生成模型的新興方法。

我們首次發布了 LoRa 訓練的相關文件，以及 3.0 Small 和 3.0 Medium 的權重。對於擁有我們企業授權的組織，我們提供微調的白手套（white-glove）支援選項。

音訊修復選項。 修改曲目中的某個片段、重新製作歌曲的一部分，或在不重新開始的情況下擴展您的作品。Stable Audio 3.0 支援單段編輯、多段編輯和因果延續（將音訊延伸超出其原始終點）。

為下一步奠定基礎

Stable Audio 3.0 是我們正在開發下一代完全授權專業音訊模型的全新架構。

儘管負責任地訓練生成式 AI 模型至關重要，但僅憑它們還不夠。以藝術家為中心的 AI 只有在授權平台上的產品體驗優於未經授權平台時才能獲勝。

我們也正在為音樂家開發一套新的產品。加入等候名單以搶先體驗：https://share-eu1.hsforms.com/1cBrLVtosT7qN7qwVKjjdiQfjsd0?__hstc=207394380.be2d72f5dae22063e964e06e785ea690.1780589629716.1780589629716.1780589629716.1&__hssc=207394380.1.1780589629716&__hsfp=a9cc2efcfcc506695dc904ec491f705f

同時，您可以了解更多我們與 Universal Music Group 的合作夥伴關係：https://stability.ai/