首页 > 元宇宙内容详情

元宇宙之声:虚拟现实音乐简史

元宇宙
广告招租

音乐的元宇宙已经迈出重要一步

线下音乐会大概是受新冠肺炎疫情影响最大的娱乐圈领域之一。在疫情的限制下,大规模人群和自由流动的国际旅行。许多乐队转向了在线直播,但即使是现场直播也无法完全复制现场的感觉。

“在歌手的实体演唱会因疫情而被取消后,‘全息演唱会’成为了一种新的在线演出方式。”HTC Vive总裁刘思明说。

那么什么是虚拟音乐,什么是元宇宙

什么是虚拟音乐

1932年,安东尼·阿尔托发表了《残酷剧场》,这是“虚拟现实”一词首次被使用。它描述了阿尔托如何思考现代戏剧的新形式。在阿尔托的文中有一段关于乐器的描写:

“乐器:它们将被视为对象和集合的一部分。此外,通过器官直接深刻地作用于情感需要,促使人们从声音的角度,研究全新声音的质量和振动,这些品质是当今乐器所不具备的,需要复兴古老和被遗忘的乐器或发明新的乐器。

除了音乐之外,还需要研究新的乐器,它们基于特殊的组合或新的金属合金,可以达到新的音域和频次,产生无法忍受的刺耳声音或噪音。”

阿尔托不太可能预见技术的进步会允许创造出一个新的空间,即元宇宙,在他那里的概念将成为内在特征。他的观点在今天引起了共鸣,因为这种新的艺术形式正在形成它的表达语言。

在虚拟世界,布景中的任何东西都可能成为乐器。它可以是一个物体或空间本身,因为声音的空间排列也是一种音乐记谱法,在这种方法中,人们可以自由走动或演奏。多个用户可以共享虚拟空间,因此最终可能加入集体表演。

“音乐家的元宇宙

元宇宙”的概念其实在《雪崩》之前就出现了,在威廉·吉布森1984年的小说《神经浪游者》中,被称为“赛博空间”。元宇宙有三个关键:互动性、存在性和标准化。

在这种情况下,在场被描述为与其他虚拟人在一个虚拟空间中的感觉。多年的研究表明,化身感可以提高在线互动的质量。现场感是通过包括头戴式显示器在内的虚拟现实技术获得的。

在线音乐合成软件Endless也希望扩展到元宇宙。日前正在发起众筹活动建立一个“音乐家元宇宙”。

该品牌表示,元宇宙将“改变我们的在线互动方式,为我们的在线生活提供一个反映‘真实’生活的新环境。”无尽的目标是利用元宇宙创造一个沉浸式的在线空间,可以复制标志性的录音和现场表演的文化意义。

虽然Endless的主要目标是使用元宇宙进行音乐创作,但它正计划开放其技术,为元宇宙创意生态系统提供操作系统。

虚拟乐器的黎明

1992年是虚拟现实乐器(VR MI)发展史的开端。它始于拉尼尔,早期VR头部显示器的生产商VPL公司的首席执行官,硅谷的创始人之一,在芝加哥SIGGRAPH会议上即兴表演“单手之声”。

他穿戴EvePhone耳机和DataGlove,演奏了电子萨克斯、铃鼓、和电子木琴,产生怪异的合成声音。与此同时,观众可以在他身后的大屏幕上观看他的POV投影。这一历史性事件开启了一场关于不使用物理乐器,而是完全使用虚拟空间中的乐器表演的可能性讨论。

在VPL没落之后,VR有一段几乎20年的衰落期,直到2013年,Oculus公司发布了开发套件头显,虚拟现实开始重新获得全世界程序员和艺术家的兴趣。

在拉尼尔时代和Oculus之间的这些年里,有一些基于2D投影的3D空间和音乐的有趣实验。其中一个是里克·巴里的2009年发布的《毒杀》,它创建了一个音乐创作和表演的虚拟空间。通过2D屏幕和投影操作游戏,使用户处在游戏的3D空间中,表演者和观众都可以自由地穿梭在游戏空间里。

巴里的高水平编码技能使他能够创建一个复杂的定制环境,但一个更简单的方法是使用一种植根于游戏建模场景的方法,以获得对元代码的创造性访问。自2007年开始,阿凡达管弦乐团(AOM)就使用虚拟乐器在《第二人生》游戏中开办演奏会。

如今的许多元宇宙环境,如VRChat、AltspaceVR、Facebook推出的Horizon,甚至是《堡垒之夜》,都具有这种模块化特性,允许用户创建自己的世界。这与拉尼尔的显性编程的概念有关。它的基本概念是在运行时编写代码,而在虚拟空间中,它也意味着在沉浸于代码编写环境的同时编写代码。

现在有很多艺术团体利用现有的虚拟环境进行表演。活跃的平台用户就是潜在的受众,其中一些平台在世界各地拥有数百万的用户基础。

今天的虚拟乐器

拉尼尔关于VR的一般概念仍然有效。他指出,VR最吸引人的地方在于它与人类行为的结合。他说,作为一名音乐家,乐器是所有界面中最重要的。

近年来,随着新一代VR技术的兴起,这方面的研究也越来越多,新一代的传感器更加精确,但与真实乐器仍有很大差距。在一些有趣的实验中,虚拟乐器试图模仿钢琴或打击乐器,但缺乏可靠的物理反馈使得模仿停在了表面。

在这方面取得好的成绩的是罗伯特·汉密尔顿。2018年,他展示了Cortet,一种将弦乐的力学原理转化为虚拟现实的技术。Cortet的声音反馈特性提供了接近于实际弦乐的听觉反馈。它采用了客户端服务器架构,因此可以让多名演奏家同时在虚拟空间中演出。名为“Trois Machins de la Grâce Aimante”的作品,就是由古典弦乐四重奏的音乐家在Cortet中演奏的。

汉密尔顿之前的VRMI项目是Carillon,这是一个由Chris Platz在2015年创建的网络化沉浸式音乐表演空间。在斯坦福笔记本电脑管弦乐队的伴奏下,两位VR表演者通过手势和动作来控制它。表演者远距离控制,通过手势的“魔法”演奏乐器,这与Cortet中对声学乐器的模拟不同。

在“魔法”和模仿之间,2019年Monad诞生了,它能在视觉上对表演者的动作做出反应。在Monad的首演中,它被称为Connexion,能为观众呈现环绕立体声的效果。观众被八声道的音响系统包围着,因此观众可以沉浸在来自各个方向的声音中。

表演的布景和拉尼尔“单手之声”表演上用的一样,都是表演者身后有一个大屏幕,上面放着他的操作界面。Connexion受到了广泛好评,但在音乐会结束后的演讲中,一些观众表示,他们更愿意与表演者一起在虚拟现实中享受演出。

这些示例显示了下一个虚拟乐器的可能方向。它们可以是一个充满多个响应性音乐对象的环境,这些对象可以自己产生声音,也可以作为交互或外部数据流的结果。他们可以通过网络操作,允许多个表演者和观众加入协同VR表演。它们可以是模块化的,允许在沉浸其中的同时构建它们。

未来的虚拟乐器

虚拟现实技术有许多局限性,其中一个是有限的触感。当我按下一个键或拨动一根弦的时候,我需要能感觉到它的存在。如果我们想用身体来操纵物体,这种触觉反应是必需的。这可能就是VPL使用手套作为控制器的原因。问题是,跨人文主义的方法是否是一个公平的选择,谁都说不准。

元宇宙中的管弦乐团

Artaud关于性能空间组织的概念与当今虚拟现实体验的部署方式惊人地吻合。

我们废除了舞台和大礼堂,取而代之的是一个单一的场地,没有任何分隔或障碍,它将成为表演的舞台。观众和观众之间,演员和观众之间,将重新建立直接的沟通。

线下的音乐活动是受新冠病毒影响最大的领域之一。另一方面,这也催化了许多使用虚拟世界作为音乐活动舞台的实验。面对疫情造成的大规模封锁,科学幻想正在成为现实。

2020年6月,让·米歇尔·雅尔和VRroOm在VRChat平台上组织了一场现场音乐会。这是一次有趣的体验,也是对元宇宙音乐会和VRChat平台现状的一次考验。观众对此非常感兴趣,因此VRrOOm工程师不得不对房间进行扩容,因为VRChat将每个房间的最大参与者数量限制为40个。

需要说明的是,让·米歇尔·雅尔只出现在了第一个房间,这个房间是为官方人士和VRrOOm团队预留的。在其他房间,只有一个平面屏幕投影,这有点令人失望。

奇怪的角色四处游荡(有人的游戏角色是辆大巴车),有的角色跳到舞台上,阻碍了艺术家的演出。因为不断有新的用户涌入,服务器延迟了很多,帧率也下降到每秒一帧,其他用户只能重启才能进入。

除了技术上的困难,周围都是穿着电子皮肤的人,让用户仿佛真的身处赛博音乐会。这次活动在VR中有2500人观看,在YouTube上有60万人观看,无疑是一个巨大的成功。

去年,Travis Scott在《堡垒之夜》举办了一系列名为“天文学”的音乐会,这场演出创下了1200多万观众在线观看的记录。与让·米歇尔·雅尔的表演相反,这是在游戏中回放的动画,所以实际上,真正唯一的实时元素是《堡垒之夜》的用户。

另一个大型游戏平台《我的世界》曾举办Block by Blockwest 虚拟音乐节,邀请了Grandson、Idles、Pussy Riot、The wreck和Sir Sly等乐队。正如组织者所说,这次活动最大的成功是聚集了社区,他们仍然在Discord服务器上交流,并等待更多的活动加入。

2020年的火人节也在元宇宙中举行。通过AltspaceVR平台,黑岩城的艺术装置、寺庙和表演场所在虚拟世界中得到了再现。同样,音乐表演被捕捉为2D视频与声音一起进入虚拟房间,因此没有与观众或任何其他虚拟对象的互动。

这些例子表明,在虚拟空间组织现场音乐会现在是一个折衷的游戏。目前还没有专门的虚拟现实平台,使用游戏环境或社交虚拟现实平台也面临着诸多挑战。

似乎在这一领域最成功的仍然是经验丰富的阿凡达管弦乐团,他们采用了技术成熟的《第二人生》,有效地利用了虚拟空间,并对这种新媒介充满了感情。

有专家认为,在虚拟现实中结合使用VRMIs和流式声音rom声学或电子nstrume,最终将为声音艺术家和音乐家提供全方位的表达。到目前为止,还没有一个平台能够处理这个问题。

Zylia公司设计的模型是实现现场音乐会真实声音环境的一步。它允许从广阔的区域(如音乐厅)采样声音,允许在音域内以六度自由移动。通过使用一个大的麦克风阵列,可以以均匀或不均匀的方式间隔,将声音捕获为环境声波格式。

如果我们能以这种形式直播音乐会,这可能会改变我们通过数字设备体验音乐表演的方式。沉浸感是一种存在感,这种存在感是我们现在能够实现的最先进的方式。

写在最后

随着扩展现实成为下一个计算平台,我们正处于从社交网络向元宇宙转变的前夜。如果新冠疫情大流行是隔离之年的开始,那么这种转变将会发生得更快。

对于一个AR艺术家来说,这个场景就像梦想成真一样,因为拥有AR设备的观众将不断增加。这也意味着音乐人们需要为元宇宙改编自己的经典作品和准备新的作品。线下的音乐场所也都将拥有各自的元宇宙版本。乐队也会在他们的工作室配备虚拟现实产品线和虚拟乐器。

元宇宙可能会像前些年的流媒体服务一样在音乐产业中崛起。虽然线下音乐会依然是重点,但一键就能参与的虚拟音乐会,将会是我们不可避免的未来吗?

相关标签: