了解生成音乐--虚拟DJ背后的技术

几千年来,音乐一直是人类的一种表达方式。而制作音乐一直是人类与生俱来的追求,是创造和合作的产物,供我们所有人聆听和欣赏。这使我们经历了不同的音乐时代,从模拟到电子,再到现在的数字,每一个时代都释放出新的流派和消费内容的方式。

当然也不缺乏创造力。世界上最大的流媒体音乐平台有数以百万计的歌曲。仅仅是Spotify,每天就有超过60,000首歌曲被上传,这相当于每年大约2200万首歌曲。Youtube音乐声称有20亿月度用户,苹果音乐有超过6000万付费用户。

为了帮助了解这一切,各平台依靠先进的音乐策划工具来帮助对无尽的选择进行分类。例如,如果您曾经试图为慢跑或学习整理出合适的播放列表,那么人工智能有可能在这个过程中伸出了援助之手。人工智能驱动的算法和大数据已经成为自动选择音乐、提供推荐和帮助您找到下一首最喜欢的歌曲的关键。 但是,拥有一应俱全的选择是否能带来更好的听觉体验并激发创造力?无论如何,我们中的大多数人最终都会反复听同样的曲目或流派。这使一些人认为这种模式已经坏了。但也许它只是不完整。

我们一直都在听音乐。但如果音乐听我们的呢?

进入生成型人工智能音乐服务,这是技术阶梯上的一个步骤--也是音乐制作的后数字时代的开始。生成式音乐开启了一个新的机会时代,在这里,旋律是不可预测的、适应性强的、独特的,而且不可能重复。这意味着听音乐将不再是一种线性体验。它将超越音乐会、专辑、曲目和有时间限制的互动。

人工智能驱动的音乐正在让音乐更好地适应用户的偏好,就像它让用户步入创作过程,共存共生。

AI’s Got Talent

机器制作音乐并不完全是一件新鲜事。

音乐和计算机之间的关系最早可以追溯到20世纪50年代初,当时英国计算机科学家阿兰-图灵成功地制作了第一部由计算机生成的旋律。1957年,Illiac Suite for String Quartet成为第一部完全由人工智能生成的作品。此后,技术一直没有停止发展,包括机器学习,诞生了越来越复杂的音乐智能。

人工智能现在被用来创造原本无法想象的新旋律,支持音乐创作的自动化,不管您信不信,它甚至承担了歌词创作的角色。这是正确的--人工智能完全有能力为您创作、表演,甚至唱歌。

想听一张完全由人工智能制作的专辑吗?没问题,Auxuman有很多音乐。也许您喜欢另类的音乐体验,比如由虚拟人工智能DJ提供的音乐会。Sensorium Galaxy有一个完整的虚拟艺术家阵容(后面会有更多介绍)。如果您有心情作曲呢? AIVA是一个伟大的工具,如果您想尝试古典或交响乐的制作。

事实上,人工智能在制作音乐方面已经变得如此有天赋,以至于它激发了AI Song Contest的创建,这是一个欧洲电视网式的比赛,展示人类在人工智能的帮助下创造的最佳音乐作品。

但这个行业几乎没有成为单机表演一类的风险。人工智能离生产现实生活中的艺术家的替代品还有很长的路要走(如果有的话),而是成为一种宝贵的共同创造工具,让创作者探索新的艺术出路。

(生成)音乐的声音

人工智能音乐能够产生实时的原创旋律流,根据目的、情绪和流派等参数,不断适应和进化,以更好地适应所处的生态系统。

Mubert就是这样一个平台,它专门授权给用户,不管是专业的还是业余的,在人工智能的帮助下创造原创和定制音乐。为了实现这一点,Mubert依靠一个数据库,其中有数以百万计的基于声音、关键词和数据点的样本,用于训练算法并产生无限的定制原创声音流。

"我们让用户控制正在生成的音乐的参数,可以是实时的,也可以是在设定的、预先定义的变化范围内。例如,通过Mubert API(应用编程接口),您将能够生成一条以一种情绪开始的轨道,并在您希望的特定标记周围过渡到另一种情绪。或者产生一个符合您标准的特定长度的混合曲目。再往下看,如果能让开发者将我们的API和其他工具之间的互动变成双向的,例如,一些音乐创作工具可以将样本发送到Mubert,而Mubert可以安排它们,并将音频送回音乐编辑应用程序。这些是我们看到的Mubert API未来发展的一些方式",Mubert的首席产品官Marko Nykoliuk解释说。

通过人工智能和人类输入的结合,来自制作人、创作者和普通用户的输入,Mubert的数据库正在不断发展和扩大。根据与用户的互动以及一天中的时间或天气等外部因素收集反馈,促进新音乐的创作。您可以混合和匹配,挑选您正在寻找的参考资料,并从不同的母带预设中选择生成一个轨道或一个流,在一个轨道中获得所有原创的声音 - 所有的声音都是用人工智能设计的。

这些音轨是专门为每个用户创作的,使听众和他们的音乐作品之间的关系更加个性化。

"作为一家公司,我们现在的重点是在艺术家和内容创作者之间建立一个尽可能好的平台。我们希望任何正在创作任何类型内容的人,无论是YouTube上的视频还是播客或社交媒体内容,甚至是游戏或元数据,我们都希望他们能够来到Mubert,找到他们正在寻找的确切类型的音乐。有正确的情绪、正确的类型,完全适合内容的长度和动态的音乐。在平台的另一边,我们想给音乐家提供一种方法,把他们的原始想法变成创作者能够使用的作品。挑战在于,通常情况下,当音乐家为内容创作者按需创作一些音乐时,他们会得到一些建议,他们会被要求重新制作或重做一些小片段,我们希望为音乐家简化事情,使他们可以把原始想法带到我们的平台,然后内容创作者可以自己告诉穆贝尔他们希望如何安排这些。当然,平台也会通过大量的机器学习和算法,学习如何以最佳方式安排这些内容",Nykoliuk补充说。

此外,像Mubert这样的API通过声音制作的民主化,为创作者打开了一个机会的世界,让新的参与者进入市场,发挥基于AI的艺术工具的潜力。降低音乐的准入门槛,只能被看作是朝着更多样化迈出的积极和进步的一步。

生成式音乐服务与预先录制的渠道(如专辑或播放列表)相比有很大的优势,因为它们有能力挖掘无尽的节拍目录,并有能力在广泛的旋律、节奏、节拍等方面生成音乐。

Mubert的首席执行官Alexey Kochetkov认为,该技术为音乐制作提供了公平的竞争环境。"我认为,使用生成音乐的最佳方式是帮助那些没有接受过音乐教育或其他东西的人创作音乐。这将给他们带来另一个维度的创造力,因此他们可以创造音乐,他们可以相互合作,他们可以一起演奏音乐,甚至分享音乐或在流媒体服务中发布音乐"。

他建议,人工智能使制作音乐的过程更容易、更公平,用可以制作什么和在哪里制作的新领域的可能性来补充现实世界的经验。

AI DJ,拿走它

Metaverses是人工智能和生成性音乐的完美结合。作为高度沉浸和互动的虚拟空间,创造的机会是无限的,无论是在音乐、舞蹈、绘画、雕塑或任何其他艺术形式。

Sensorium Galaxy是一个专注于提供高质量的VR和AR娱乐体验的元宇宙,没有任何脚本或预先确定的结果,这让创作者能够完全控制他们的创意视野。一个具有绝对自由的环境的一大亮点是与其他用户和智能生命(化身)互动的可能性,同时也是与一个全新的艺术家品种--人工智能DJ的互动。

Sensorium与Mubert的合作导致了世界上第一个人工智能驱动的DJ的发布,如JAI:N。这是通过Mubert的API实现的,它使这些虚拟艺术家能够创造实时音乐,从60多种不同类型中汲取灵感,包括嘻哈、EDM和K-pop。

最近,Sensorium和Mubert合作,制作了一套全新的人工智能DJ,被称为社会人工智能DJ。第一个发布的是Kàra Màr,他也成为第一个在Spotify上首次发布专辑的社交AI艺术家。Mubert的专有技术使这些虚拟生命能够产生不断变化的音乐,而Sensorium则为他们配备了虚拟身体、智能和社交技能。

这种独特的组合让虚拟DJ与粉丝进行无脚本和发人深省的对话,在他们不表演的时候创造出高水平的互动。

因此,很明显,我们看到了人工智能创造力的曙光;有史以来第一次,由人工智能驱动的艺术家将在元宇宙中自主表演,与David Guetta、Armin van Buuren和Carl Cox等现实中的DJ一起,释放出无与伦比的音乐会体验。

"如果您想象一个元宇宙,您会认为它是由数百、数千或数百万人共同创造的东西。每个人都能带来他们自己的东西。如果您考虑到这些元宇宙中的音乐,听起来很荒谬,音乐将是这种静态的作品,这种静态的MP3音频,对每个人都是一样的。我们认为它不应该是这样的,我们认为生成性音乐以这种方式--它采用音乐家正在创造的东西,采用这些循环,这些样本,并将它们作为构建块来创造更深的东西,创造出有如此多变化的音乐,它们可以为这个元宇宙中的每个用户带来独特的东西",Nykoliuk说。

与物理世界不同,元宇宙有潜在的无限的数据点,算法可以从中学习。这使得每个用户的'音乐DNA'可以逐步丰富,并变得百分之百适应。

由Sensorium Galaxy整合的社会机制也鼓励用户和人工智能生命以独特的共同创造的形式走到一起。不时,这可能会导致世界上第一个人工智能超级明星和影响者的崛起,拥有自己的粉丝群和盈利机会。

然而,Sensorium和Mubert的既定目标不是要取代现实生活中的音乐体验,而是要用技术进步来补充它们。

##一个听起来不像过去的未来

技术通过增加新的物理和虚拟维度,创造了人们可以发挥创造力的新方式。由于人工智能,以前从未想象过的视野触手可及,并将创造力的潜力提升到新的高度,人类可以敢于更多地表达。从创作到消费,由人工智能驱动的音乐革命没有回头路可走。

与其他任何技术进步一样,仍有一些挑战需要克服。微调音乐引擎和算法以更好地适应虚拟观众就是其中之一。

"在现实世界中,DJ播放一些东西,观众会做出反应。这是一种非常自然的通过音乐进行互动的方式。我们在这方面做了大量的研究和开发。我认为,虚拟观众,如VR用户,应该像体验真实的音乐和DJ的表演一样。这方面关于观众和虚拟DJ之间的反馈是非常重要的。对我来说,这是一个非常困难但有趣的挑战",Mubert的首席内容官Paul Zgordan总结道。

Sensorium Galaxy与Mubert合作发布的虚拟DJ是向前迈出的一步,为用户提供了一个辅助工具,在创意过程中,人类仍然处于驾驶位置,因为他们达到了新的创意高度。

未来,传递到您的邮箱

最新产品开发新闻
特别公告和优惠