内容简介:编者按:本文来自微信公众号From: The Verge;当你感受夏天进行时,用音乐冰一杯MOJITO,为你献唱的可能不是英俊的杰伦,而是智能的AI点唱机:notes:。点唱机自己作曲,各种流派都不在话下,异域风情的和弦还带着Havana的微醺味道。
编者按:本文来自微信公众号 “将门创投”(ID:thejiangmen) ,36氪经授权发布。
From: The Verge; 编译:Iris
当你感受夏天进行时,用音乐冰一杯MOJITO,为你献唱的可能不是英俊的杰伦,而是智能的AI点唱机:notes:。点唱机自己作曲,各种流派都不在话下,异域风情的和弦还带着Havana的微醺味道。
"AI"和"音乐"的跨界合作,听起来很不可思议,但它绝非不可能。前不久,OpenAI实验室就让这一切成真了,他们推出的会自弹自唱的AI点唱机"Jukebox"将为音乐界带来不小的震动,能在短时间内写出数十首歌。
音乐界的"奇迹"? 「AI版卡拉OK」
OpenAI推出了一款可以自主创作音乐的AI系统“Jukebox”(即英文中“点唱机”的意思),在吸收了曲库里成千上万的乐曲数据之后,它创造出的旋律但足以让普通听众耳目一新,如果不告诉听众这是AI做的歌曲,他可能完全听不出来。
事实上,让AI学会做音乐是一个比较艰巨的课题,主要在于AI的核心能力时数据训练和检索,而创作这一不可预知性的能力对于AI略有些"超纲"。
自动生成音乐的历史可以追溯到半个多世纪前。技师在节拍器上设定每个音符的间隔时间和音调等,让它根据固定的和弦模式来按动琴键。但是,它的局限性非常显著,捕捉不到更细微的音色、动感和音乐表现力。
现在,时代变了,人们尝试让机器在多种音乐风格中进行切换,而不止步于那几个简单的和弦。这也就是OpenAI的灵感源泉:建立庞大的数据库,让AI系统广泛接触各式各样的歌曲乐章,充分训练它的作曲能力。
在研究方法上,OpenAI的研究人员也称得上相当有创意。他们首先借助原始音频数据源来训练Jukebox模型,模型在吸收数据库后,会将这些原始音频进行适当加工,又将它们“吐”了出来,从而形成它自己的“创作”。
原始音频的加工过程示意图
为了保证音乐加工过程的有效性,研究人员使用卷积神经网络对原始音频进行编码和压缩,用音频转换器生成新的压缩音频,对其进行音谱采样,再将它们转换为第二代原始音频数据库,让AI加工更便捷快速。
更庞大的数据库 = 更有新意的创作输出
这种方法也被用于OpenAI的前代虚拟音乐制作系统MuseNet的研发过程当中。不过,Jukebox比前代要更智能,在加工过程中,它能够与OpenAI研究人员合作共同编写乐曲。与使用MIDI数据的MuseNet不同,这些乐段模型是在统共包含120万首歌曲的原始数据集上展开训练的,把从LyricWiki上搜集筛选得到的元数据和歌词信息添加到音频之中。
Jukebox的应用封面
可惜的是,这款AI版点唱机还不会自己生成歌词,在歌词合成环节,必须需要人工干预。而且,严格意义上来说,它根据前人的音乐所创作的旋律,并不能算是真正的音乐,听上去还常让人颇感耳熟。研究人员有些惋惜地说:“尽管AI点唱机的‘创作’成就,在音乐质量以及对艺术家流派的适应能力方面迈出重要一步,但它与人类的音乐创作还有着云泥之别。例如,虽然歌曲保持了良好的连贯性,能够遵循传统的和弦演奏模式,产出令人印象深刻的独奏,但我们还无法期待复杂的编曲,或者人声合唱等内容。”
Jukebox依赖曲库数据集来加工产出乐曲,意味着音乐界的版权纷争。知名播客主播Cherie Hu在Twitter上指出,AI版点唱机可能带来版权灾难。
(* Tip:就在不久前,著名歌手Jay-Z表示他将以抵制侵权的名义,将那些未经授权的、其原创歌曲的合成音频从YouTube上全部删除。)
Jukebox正在播放"仿"Katy Perry产出的歌曲
Jukebox的原始曲库里,势必也包含水果姐、坎爷和黄老板等当红歌手的歌曲,那么,它在再创作时,有取得这些歌曲的版权吗?这又是个难解的话题。
说了这么多,归根结底,AI点唱机仍是一个非常吸引人的技术成就,它突破了机器学习技术可能性的界限。如果你对它颇感好奇,链接在此,不妨去听听吧:
https://openai.com/blog/jukebox/
以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网
猜你喜欢:- 委身后辈,昔日巨星MIPS能否靠开源绝地求生?
- 跨链巨星 Polkadot 生态历险 129 个生态资助项目大摸底
- 周五晚上的一个想法到跟巨星侃爷 Kanye 的谈判
- 被捧上天的流量巨星GPT-3,突然就不香了?
- NBA 巨星被迫骑电动车,魔都交通为何令人抓狂?
- IPFS:区块链“不可能三角”的可能解 | 万向区块链小课堂
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
图片转BASE64编码
在线图片转Base64编码工具
SHA 加密
SHA 加密工具