谷歌旗下的DeepMind與視頻平臺YT合作,發布了目前最先進的音樂模型——Lyria。
為了突破傳統音樂模型的生硬機器感,谷歌匯集了多個部門并與Charlie Puth、T-Pain、Troye Sivan等9位知名音樂人共同研發了Lyria。
Lyria可生成爵士、重金屬、搖滾、電子、流行等多種類型音樂。由于專業音樂人的加入,使得Lyria在歌詞、旋律、節奏、模擬人聲等方面非常卓越達到以假亂真的效果。
例如,生成的Charlie Puth音樂和本人演唱的幾乎無差別。
AI生成的Charlie Puth歌曲
生成的T-Pain歌曲
Lyria簡單介紹
通常,一首歌曲包含大量數據,需要考慮節拍、音符、和聲、樂器搭配等多種元素。
在生成長序列聲音時,AI模型難以在短語、節和延伸段落間保持音樂的連續性。所以,AI生成音樂的難度遠遠超過純背景音樂。
谷歌研究人員采用了一種全新的方法來開發Lyria,在生成高質量、逼真音樂的同時,還能讓用戶對風格和個性化進行更詳細的控制。
目前,谷歌在YT平臺通過Lyria模型開展了一項名為“Dream Track”的實驗,目的是幫助音樂人加速音樂制作,為其粉絲帶來一種全新的音樂風格。
在該實驗中,部分創作者可以使用Dream Trac生成包括Alec Benjamin、Charlie Puth、Charli XCX、Demi Lovato、John Legend、Sia、T-Pain等藝術家,帶有AI生成聲音和音樂風格的獨特原聲歌曲。
使用Dream Track方法非常簡單,用戶只需要輸入一段文本,然后選擇一名音樂人風格,就能生成一個30秒的短音樂,同時可以生成歌詞、伴奏等。
使用界面
此外,Lyria模型還有一項非常強大的功能,可以將音頻、音樂轉直接換成另外一種風格,例如,把一首流行歌曲轉換成管弦樂譜;將MIDI 鍵盤和弦,轉換為聲樂合唱團的聲音。
轉換示例
對AI音樂添加水印
為了提升AI的安全,避免用戶通過Lyria生成的音樂亂用,谷歌將自研的SynthID水印直接內置在其中。
Lyria生成的所有歌曲都帶有數字水印,人的耳朵聽不見也不會影響音樂的效果。主要通過音頻波轉換為二維可視化來實現。
水印示例
即便數字水印遭受了添加噪聲、音質壓縮、音頻調速等破壞性操作,仍然可以檢測到歌曲中的水印。
谷歌表示,Lyria可以徹底改變音樂的創作模式,可以幫助制作人簡化繁瑣、重復的流程,同時能激發他們的靈感,可以創造更多豐富、有節奏的好音樂。
未來,將繼續與音樂人、公司合作,增強Lyria的功能和使用范圍。
本文素材來源谷歌官網,如有侵權請聯系刪除
未經允許不得轉載:RPA中國 | RPA全球生態 | 數字化勞動力 | RPA新聞 | 推動中國RPA生態發展 | 流 > 文本生成超逼真歌曲,谷歌推出音樂模型Lyria
熱門信息
閱讀 (14728)
1 2023第三屆中國RPA+AI開發者大賽圓滿收官&獲獎名單公示閱讀 (13753)
2 《Market Insight:中國RPA市場發展洞察(2022)》報告正式發布 | RPA中國閱讀 (13055)
3 「RPA中國杯 · 第五屆RPA極客挑戰賽」成功舉辦及獲獎名單公示閱讀 (12964)
4 與科技共贏,與產業共進,第四屆ISIG中國產業智能大會成功召開閱讀 (11567)
5 《2022年中國流程挖掘行業研究報告》正式發布 | RPA中國