2023 年今日 Google DeepMind 與 YouTube 發表音樂模型 Lyria
2023 年 11 月 16 日,Google DeepMind 與 YouTube 發表音樂生成模型 Lyria,稱之為 DeepMind 當時最先進的 AI 音樂模型,並同時推出兩項以 Lyria 為基礎的實驗:在 YouTube Shorts 短片內試行的 Dream Track,以及與音樂人一同設計的 Music AI 工具。
DeepMind 在發表文章中解釋,音樂比說話難生成得多。一首歌每一秒都包含節拍、音符及和聲,又往往同時有多把人聲及多種樂器;生成長段落時,AI 模型很難在樂句、主歌及整首歌之間保持連貫。DeepMind 表示,Lyria 能生成連人聲及伴奏的高質素音樂,亦可延續或改寫一段音樂,並讓用戶更細緻地控制風格及演繹。
Dream Track 讓創作者借用 9 位歌手的聲線
Dream Track 是 Lyria 的第一個公開試驗。據 YouTube 網誌,一小群獲選的美國創作者可以在建立 Shorts 時輸入一個題目,再從歌手列表中揀一位,Lyria 便會同時生成歌詞、伴奏,以及模仿該歌手聲線及風格的 AI 人聲,製成最長 30 秒的配樂。
首批參與的 9 位歌手如下:
歌手 | 歌手 |
|---|---|
Alec Benjamin | Charlie Puth |
Charli XCX | Demi Lovato |
John Legend | Papoose |
Sia | T-Pain |
Troye Sivan |
YouTube 指,這些歌手是主動選擇參與,並會協助測試及塑造 AI 音樂的發展。Charlie Puth 在 YouTube 網誌表示,YouTube 明白各方要合作,以負責任的方式發展這項技術,「確保它會加快創作,而不是取代創作」。
Music AI 工具把哼唱變成樂器
第二項實驗是一套 Music AI 工具,由 DeepMind 研究人員與 YouTube Music AI Incubator 內的歌手、作曲人及監製一同設計。DeepMind 示範的用法包括:哼一段旋律變成銅管樂,把 MIDI 鍵盤彈出的和弦變成合唱團人聲,以及把口技(beatbox)變成鼓聲循環。DeepMind 表示,工具會繼續由孵化計劃的參與者試用。
每段 Lyria 音樂都加上 SynthID 水印
DeepMind 同日表示,Lyria 生成並發布的內容都會加上 SynthID 數碼水印。SynthID 原本用於標記 Google Cloud 上 Imagen 生成的圖片,用於音訊時,會先把聲波轉成頻譜圖(顯示各個頻率隨時間變化的二維圖像),再嵌入人耳聽不到的水印。DeepMind 稱,即使音訊經加入雜音、MP3 壓縮,或加快、減慢播放,水印仍可被偵測,亦能判斷一首歌哪些部分由 Lyria 生成。
據 TechCrunch 報道,Lyria 發表時,AI 在創作界正備受爭議:美國演員工會罷工在同月才結束,而早前有人以 AI 模仿 Drake 及 The Weeknd 的聲線推出歌曲 Ghostwriter。
其後 Lyria 走進 Gemini 應用程式
Lyria 其後繼續更新。2026 年 2 月 18 日,Google 把 Lyria 3 加入 Gemini 應用程式,以測試版形式推出。據 TechCrunch 報道,用戶描述想要的歌曲,Gemini 便會生成一段連歌詞的 30 秒音樂,亦可上載相片或影片,讓 AI 按其氣氛配樂。同日 Google 把只限美國創作者使用的 Dream Track 擴展至全球。
與 2023 年的 Dream Track 不同,Google 表示 Lyria 3 是為原創而設計,不會直接模仿現有歌手;提示中寫上歌手名字,只會被當作風格參考。所有 Lyria 3 生成的歌曲都附有 SynthID 水印,用戶亦可上載歌曲,問 Gemini 是否由 AI 生成。2026 年 9 月,Google 再推出 Lyria 3.5,供 Gemini 應用程式及 Gemini API 使用。
日期 | 事件 |
|---|---|
2023 年 11 月 16 日 | 發表 Lyria、Dream Track 及 Music AI 工具 |
2026 年 2 月 18 日 | Lyria 3 加入 Gemini 應用程式,Dream Track 擴展至全球 |
2026 年 9 月 | Lyria 3.5 加入 Gemini 應用程式及 Gemini API |
來源
- Transforming the future of music creation(Google DeepMind)
- An early look at the possibilities as we experiment with AI and Music(YouTube 官方網誌)
- Google adds music-generation capabilities to the Gemini app(TechCrunch)




暫時未有留言
提交留言即表示你已閱讀我們的私隱政策。