Blog

Google DeepMind與YouTube聯手推出創新AI音樂生成工具,開啟音樂創作新紀元

Blog Image
Google DeepMind與YouTube聯手推出創新AI音樂生成工具,開啟音樂創作新紀元

November 17, 2023

重點摘要:
  1. Google DeepMind宣布推出名為「Lyria」的新音樂生成模型,將與YouTube合作,包括Dream Track和Music AI工具,用於創作音樂和輔助創作過程。
  2. Dream Track允許創作者根據主題和選定藝術家風格創建30秒的AI生成音樂片段,用於YouTube Shorts。
  3. Music AI工具將涵蓋多個領域,如創作音樂、建造合唱團或合奏,以及為現有聲音線構建背景和樂器曲目。



新聞內文:
今年1月,Google靜靜地發布了一些基於AI的音樂創作軟體的研究,該軟體根據單字提示創作曲調,引起了一些波瀾。今天,Google的姊妹公司「Google DeepMind」更進一步宣布了一個名為「Lyria」的新音樂生成模型,將與YouTube合作使用;以及基於Lyria架構的兩個被描述為「實驗」的工具集。Dream Track將允許創作音樂,用於YouTube Shorts;以及Music AI工具,旨在幫助創作過程,例如根據創作者可能哼唱的片段創作曲調。除此之外,DeepMind表示,它正在適應「SynthID」(用於標記AI圖像)來為AI音樂加上浮水印。

這些新工具的推出是在AI在創意藝術領域繼續引起爭議的時候進行的。它是「Screen Actors Guild」罷工的核心主題之一;而在音樂方面,雖然每個人都知道Ghostwriter使用AI來模仿Drake和The Weeknd:但你必須問的問題是「AI創作是否將在未來變得更加普遍」。

根據今天宣布的新工具,DeepMind和YouTube的首要任務似乎是創作技術,有助於AI音樂保持可信度,既作為當今創作者的補充,也在最美學上聽起來像音樂。

正如Google過去的努力所顯示的,一個常常出現的細節是,越久聽AI生成的音樂,它就會變得越扭曲和超現實,遠離預期的結果。正如DeepMind今天所解釋的,部分原因是由於訊息的複雜性進入了音樂模型,包括節拍、音符、和諧和更多。

DeepMind今天指出:「當生成長序列的聲音時,AI模型很難在短語、詩節或長時間的段落之間保持音樂連貫性。” “由於音樂通常包括同時出現的多個聲音和樂器,要創建它比創建語音難得多。”

因此,值得注意的是,該模型的一些首次應用出現在較短的作品中。

Dream Track最初將提供給一組有限的創作者,以創建30秒的AI生成音軌,以「模仿包括Alec Benjamin、Charlie Puth、Charli XCX、Demi Lovato、John Legend、Sia、T-Pain、Troye Sivan和Papoose等藝術家的聲音和音樂風格」。

創作者輸入一個主題,選擇一位藝術家,以及一個帶有歌詞、伴奏曲和所選音樂家聲音的曲目,用於創建30秒的音樂片段,旨在與Shorts一起使用。這裡有一個Charlie Puth的示例曲目:



YouTube和DeepMind明確指出,這些藝術家參與了該項目,幫助測試模型並提供其他意見。

YouTube的音樂負責人Lyor Cohen和其副總裁Toni Reed指出,即將推出的Music AI工具是來自該公司的「Music AI孵化器」,這是一組藝術家、詞曲作者和製作人,他們正在測試並提供反饋意見。

他們指出:「早期就清楚,參與的這一組人對可以推動他們認為可能的極限的AI工具非常好奇」。「他們還尋求能夠增強其創作過程的工具」。

儘管Dream Track今天得到了有限的釋放,但他們表示,Music AI工具將在今年晚些時候推出。DeepMind預告了它們將涵蓋的三個領域:在指定樂器中創作音樂,或者根據哼唱的曲調創造一整套樂器;使用簡單的MIDI鍵盤上建立的和弦創造整個合唱團或其他合奏;為可能已經存在的聲音線構建背景和樂器曲目。 (或者實際上,使用這三種方法的組合,從一個簡單的哼唱開始。)



在音樂方面,Google和Ghostwriter當然不是孤單的。在推出工具的其他公司中,Meta在六月份開源了一個AI音樂生成器;Stability AI在九月份推出了一個;而新創公司「Riffusion」也正在為他們在這一領域的努力籌集資金。音樂行業也在緊急準備。

新聞原址: https://techcrunch.com/2023/11/16/deepmind-and-youtube-release-lyria-a-gen-ai-model-for-music-and-dream-track-to-build-ai-tunes/