(相關(guān)資料圖)

繼文字生成AI模型Wordcraft、視頻生成AI模型Imagen Video后，日前谷歌方面公布了對(duì)音樂生成AI模型MusicLM的研究成果，該模型可以根據(jù)文本或圖片生成任何類型的高保真音樂。

在相關(guān)聲明中，谷歌方面展示了大量生成作品的案例，例如輸入文本“雷鬼和電子舞曲的融合，帶有空曠的、超凡脫俗的聲音，引發(fā)迷失在太空中的體驗(yàn)，音樂的設(shè)計(jì)旨在喚起一種驚奇和敬畏的感覺，同時(shí)又適合跳舞”，MusicLM便可生成一段時(shí)長30秒的電子音樂；又如以世界名畫《跨越阿爾卑斯山圣伯納隘口的拿破侖》為題，MusicLM生成的音樂便莊重典雅，體現(xiàn)出冬日的凌厲肅殺和英雄主義色彩。

據(jù)悉，在MusicLM之前，同類產(chǎn)品還包括Riffusion、Dance Diffusion、人工智能研究機(jī)構(gòu)OpenAI旗下的Jukebox，以及谷歌自家的AudioML等。雖然MusicLM并非首個(gè)可以根據(jù)文本生成音樂的AI模型，但得益于集成了MuLan+AudioLM和MuLan+w2b-Bert+Soundstream等多個(gè)模型的優(yōu)勢(shì)，以及龐大的訓(xùn)練數(shù)據(jù)庫（280000小時(shí)的音樂），其能制作出作曲特別復(fù)雜或保真度特別高的歌曲。

據(jù)了解，MusicLM不僅具備強(qiáng)大的輔助功能，可設(shè)定具體的樂器、地點(diǎn)、流派、年代、音樂家演奏水平等“參數(shù)”，從而對(duì)生成的音樂質(zhì)量進(jìn)行調(diào)整，還能使用計(jì)算機(jī)通常難以掌握的抽象概念編寫曲目。此外MusicLM還具有“故事模式”，可編程特定時(shí)間內(nèi)的音樂風(fēng)格、氛圍和節(jié)奏的轉(zhuǎn)變，例如可采用幾個(gè)按順序編寫的文本描述來創(chuàng)建一種“故事”的敘事旋律。

但需要注意的是，MusicLM也有生成式AI普遍面臨共同的風(fēng)險(xiǎn)，即技術(shù)不完善、素材侵權(quán)、道德爭(zhēng)議等。例如在要求MusicLM生成人聲時(shí)，雖然技術(shù)上可行，但結(jié)果卻可能不如人意，有時(shí)會(huì)出現(xiàn)歌詞意義不明的情況，并且MusicLM生成的音樂中，約有1%是直接從訓(xùn)練集的歌曲中復(fù)制而來。

因此谷歌方面暫未向公眾發(fā)布MusicLM，并且該公司表示，“我們承認(rèn)需要在未來開展更多工作來應(yīng)對(duì)這些與音樂生成相關(guān)的風(fēng)險(xiǎn)，目前沒有發(fā)布該模型的計(jì)劃。”

權(quán)威！全面！便捷！行業(yè)人都在關(guān)注的視頻號(hào) ——

責(zé)任編輯：房家輝

關(guān)鍵詞： 輔助功能 跨越阿爾卑斯山圣伯納隘口的拿破侖 責(zé)任編輯