Google 更新 MusicFX DJ 可以像DJ一樣靈活控制音樂生成和編輯

Google DeepMind 發佈了一項新的生成式 AI 技術，這項技術被應用在了 MusicFX DJ 和更新後的 Music AI Sandbox 中，旨在大幅提升音樂創作的效率和靈活性。

提供了多種功能，包括風格嵌入、實時流媒體生成、音樂循環生成等，為音樂人和普通用戶提供了更高效、更靈活的創作環境。

MusicFX DJ

核心功能：MusicFX DJ是一款專為實時音樂生成設計的AI工具，用戶可以通過文本提示組合不同的音樂概念，操作像DJ一樣簡單。從而實時生成新的音樂內容。這一工具不僅適合專業音樂人，也適合無音樂背景的用戶，讓每個人都能參與創作。

主要更新：

• 多提示詞輸入：用戶可以輸入多個提示詞，同時還可以選擇具體的樂器、音樂風格和氛圍，生成定製化的音樂。這種靈活的提示輸入方式讓用戶可以根據不同的需求生成多樣化的音樂內容。

• 實時流媒體生成

  ：模型可以在實時流媒體中進行音樂生成。當用戶通過文本提示或其他控制指令調整音樂風格、節奏或樂器時，AI模型會迅速響應並生成相應的音樂變化。像是一個可以現場演奏的「虛擬樂器」，用戶可以實時調整音樂元素，就像在實際演奏中即興創作一樣。為此，DeepMind 訓練模型在前 10 秒的音樂基礎上生成接下來的 2 秒，使得模型能夠連續產生音樂，保證創作過程的流暢性。

  流程圖顯示 MusicFX DJ 如何生成連續的音樂流，從先前的剪輯創建下一個剪輯，同時通過文本提示和滑塊控制以權衡其重要性。

• 更直觀的控制

  ：用戶可以自由組合不同的音樂元素，比如混合不同的樂器、風格和氛圍，探索全新的音樂風格或即興表演。新界面和優化後的控制讓用戶可以實時調整音樂的音色、節奏和旋律。

• 風格嵌入

  ：MusicFX DJ 的「風格嵌入」功能允許用戶通過滑塊設置文本提示，從而調整生成音樂的風格和特性。這種嵌入機制可以更好地控制生成音樂的多樣性和一致性。

• 創作體驗的提升

  ：用戶可以選擇添加或去除貝斯、鼓等樂器，也可調整音樂的明亮或暗淡、重覆或隨機、平滑或粗糙的音質，並控制音樂的調性和節奏，使其更容易與其他音樂作品合奏或協作。

• 生產級音質

  ：得益於DeepMind音頻研究團隊的最新創新，包括新的神經音頻編解碼器和優化的網絡架構，MusicFX DJ現已實現48kHz的立體聲實時流式傳輸，達到專業製作所需的音質標準。

Music AI Sandbox

功能概述：這是一套為音樂人、製作人和詞曲作者設計的實驗性工具，能夠加速工作流程。Music AI Sandbox 可以幫助創作者快速生成歌曲草圖，並提供多軌視圖，幫助用戶更好地編輯和完善音樂作品。它提供了多種創作工具，包括循環生成、聲音變換和多軌編輯等，適合創作靈感的快速捕捉與拓展。

多功能特性：

• 音樂循環生成：用戶可以生成特定的音樂循環，用於歌曲的不同部分或用於創作新元素。
• 聲音轉換：可以對已有的聲音進行多種轉換，使聲音具備不同的效果和特徵。
• 聲音修復（In-painting）：在音頻的修復和改進方面也具有創新功能，可以對音頻中有缺陷的部分進行自動填充和修復。

即將上線的新功能：

• 新版的Music AI Sandbox將引入多軌視圖，使創作者能夠更精確地組織和調整樂曲的各個部分。用戶可以使用這些工具創作樂曲草稿，並通過環生成、音頻填充和聲音變換等功能更好地打磨和連接音樂片段。
• 未來，Sandbox的部分成功元素將被整合到Google的主流產品中，使更多創作者能夠享受到這些生成式音樂技術帶來的創作便捷。

原文：https://deepmind.google/discover/blog/new-generative-ai-tools-open-the-doors-of-music-creation