OpenAI引入了Jukebox一种新的AI模型可以生成特定类型的音乐

人工智能 2020-09-15 12:20:30

人工智能研究实验室OpenAI今天推出了一种新的生成模型,该模型可以制作音乐,名为Jukebox。即使结果听起来听起来像是糊状的歌曲,听起来也很熟悉,但它在技术上给人留下深刻的印象。

研究人员之所以选择从事音乐是因为这很困难。即使它们不完全是我所说的音乐,研究人员获得的结果也令人印象深刻。有可识别的和弦,旋律和单词(有时)。

OpenAI做到的方式也令人着迷。他们使用原始音频来训练模型-从而返回原始音频-而不是像弹奏钢琴那样使用“符号音乐”,因为符号音乐不包含声音。为了获得结果,研究人员首先使用卷积神经网络对原始音频进行编码和压缩,然后使用所谓的转换器生成新的压缩音频,然后对其进行上采样以将其转换回原始音频。

这种方法类似于OpenAI开发以前的音乐制作AI的方式,即MuseNet,但Jukebox通过与OpenAI研究人员合作生成自己的歌词(该公司使用“共同编写”一词),进一步走了一步。与使用MIDI数据的MuseNet不同,这些模型在120万首歌曲(60万英语)的原始数据集上进行了训练,并使用了从LyricWiki抓取的元数据和歌词。(包括艺术家和流派数据,以改善模型的输出。)尽管如此,正如研究人员所写的那样,仍然存在局限性。

他们写道:“虽然自动点唱机在音乐质量,连贯性,音频样本的长度以及对艺术家,流派和歌词的适应能力方面都迈出了一大步,但这些世代与人类创造的音乐之间仍然存在着巨大的差距,”他们写道。“例如,虽然生成的歌曲显示出本地音乐的连贯性,遵循传统的和弦模式,甚至可以表现出令人印象深刻的独奏,但我们却听不到熟悉的大型音乐结构,如合唱重复出现。”

实验还存在其他问题。正如作家和播客Cherie Hu在Twitter上指出的那样,Jukebox可能是一场版权灾难。(值得注意的是,就在本周,Jay-Z试图利用版权警示从YouTube删除自己的合成音频。)

综上所述,自动点唱机是一项非常有趣的成就,它超越了一切可能。即使音乐家OpenAI展示了Jukebox认为它需要一些工作。去听你自己!

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时候联系我们修改或删除,多谢