MusicGen:AI生成音乐

Meta开源了MusicGen模型,只需要输入简单提示词,就可以生成不同风格的音乐。

怎么玩儿?简而言之就是文字提示生成音乐。单纯的文字生成音乐;给文字提示+上传一段旋律作为参考,生成一段音乐;或者干脆直接用 音乐产出音乐。不过测试端只能生成30s的音乐。

我自己也体验了下,操作确实简单,不懂代码和算法的小白也可以去测试地址玩一玩。

 

https://huggingface.co/spaces/facebook/MusicGen

官方给了几个demo,听起来还是不错的

1-1 bach.mp3

提示词 an 80s driving pop song with heavy drums and synth pads in the background

1-2 bach Gen.mp4

一首巴赫风格的、带有80年代流行曲感觉的音乐就生成了

有时间的也可以自己去测试体验,没准能生成一个奇特的来电铃声。

I. 纯文字提示:

Hip-hop with R&B and jazz, heavy emphasis on rhythms, layered instrumentation and dynamic

第一遍产出:2-1 Hip-pop the first.mp4

第二次产出:2-2 Hip-pop the second.mp4

II. 文字加音乐引导:

文字提示:pop rap style with electric guitar, about the emotions associated with losing a loved one and missing them

原曲:3-1 Original -.mp3

产出:3-2 Poprap.mp4

文字提示:gentle and soft piano

原曲:4-1 Original—.mp3

产出:4-2 gentle and soft piano.mp4

以上几个听起来感觉还不错,不过,同样的提示词+同样的参考音乐,每次生成的都不一样,也就是点击三次Generate,这三次生成的音乐不同。

III. 音乐产出音乐:

仅仅参考3-1 Original的音乐

产出:无文字提示产出Original -.mp4

如果想不出提示词,大家也可以求助Chat GPT关于音乐风格、律动节奏之类的信息,比如:

give me five prompts to indicate individual genres of music 给我五个提示来指出音乐的不同类型

now describe a prompt for each, from 1 to 5, that could generate an example of each style

现在为每一种风格描述一个提示,从1到5,可以生成每种风格的示例

图片信息来自:https://www.youtube.com/watch?v=ELv8xtcUIK8

目前大家对这个模型的态度和评价也是褒贬不一,主要是关于能否取代艺术家、音乐质感好坏、版权之类的讨论,各抒己见吧。不过具体怎样让它发挥更大效益是个值得思考的问题。比如跟其他工具结合,作为小视频背景音还是可以的。可能以后还能有更多改进和突破。

称不上完全原创,AI在音乐领域还差得早

也有人觉得很棒

今年经历了AI在图像、文本、语音、游戏等领域的暴击,接下来会是音乐和视频。

也有人不喜欢这些,认为就算AI能胜任部分创作,这也是挺令人讨厌的……

为小视频提供背景音,这可能是MusicGen的一条良好出路。

 

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注

Time limit is exhausted. Please reload CAPTCHA.