图中:Ramani Duraiswami(左)和Dmitry Zotkin(中),他们正在模拟3D音频的还原。
在前一章中,我们简单介绍了3D音频。那么,3D音频有什么惊人的效果呢?你真的能忘记耳机的存在,全身心地投入另一个虚拟世界吗?通过这篇文章,你会期待一切即将到来!
3D 音频技术对于虚拟现实的重要意义
随着3D音频领域的技术进步,现在任何电影或者游戏中的声音都可以通过这项技术进行处理,让玩家或者粉丝站在一个开放的空间或者感受到剧场中的声音。音乐和电影甚至可以从制作的早期就开始制作。例如,Bjork发布了约360度环绕的3D音频音乐视频。(该技术由VisiSonic的竞争对手提供)。比约克在她的脸书主页上描述了这种声音,让听众感觉他们站在海岸上,或者你被至少30个扬声器包围着。此外,虚拟现实电影工作室现在也在尝试制作沉浸式360度电影,也就是电影中的一切都完全围绕着你。当然,这类电影需要这种音频技术的支持,使得身临其境的感觉更强。
虚拟现实的视觉技术在过去的几十年里取得了很大的进步,但是现在音频领域的3D技术已经开始迎头赶上。目前,几家虚拟现实公司要么最近发布了新的耳机,要么计划发布。
RealSpace 3D技术的另一个应用案例(由独立的第三方程序员开发,使用VisiSonics发布的软件插件)让我对Oculus为什么需要这种3D技术有了更深入的了解。)这是我第一次真正戴上3D耳机。我走在一座木桥上,脚下是一个池塘,里面满是鱼和一些热带植物。我转过头,看着眼前的一切,面对的是电竞中元素丰富的场景,但最有特色的是,我仿佛完全置身于电竞中,RealSpace 3D技术驱动的声音完全包围了我。我感觉自己真的站在户外,在夜空下,蟋蟀在我身后嗡嗡叫,水静静地流淌,就在我的右边。当我转过头的时候,似乎所有的声音都变了,在那里的感觉很强烈。
让大家尽可能的感受视频,虽然你不是在享受3D音频。
戴上Oculus Rift耳机后,我真正明白了3D音频对于虚拟现实的重要性。
目前,VisiSonics希望在沉浸式音频领域做得更多。!比如他们希望玩家仅仅通过听声音就辨识出来敌人前进的方向。,现在这个团队已经向Unity(大型游戏开发平台)提供了RealSpace 3D工具,并不断将自己的技术与其他游戏引擎进行整合。它的应用范围太广,从iPhone到高端台式电脑都有。VisiSonic的软件可以根据计算设备的计算能力,创造当前配置所允许的最佳声音体验。
群雄逐鹿的 3D 音频市场
然而,VisiSonics并不是唯一一家发现3D音效市场巨大潜力的公司。它的两个竞争对手是Impulsonic和两个大耳朵。两家公司都比较小,刚刚成立。另一家初创公司Thrive Audio最近被谷歌收购,该公司也为虚拟现实创造逼真的音效。这也显示出谷歌在这一领域的兴趣越来越大。VisiSonics首席软件工程师Rod Haxton表示:“这种竞争对整个行业都是有利的,也能快速提升3D音频技术的地位。然而,使我们与其他国家不同的是声音的质量、技术的易用性及其在各种数字设备上的应用。」
取得这一成就的原因是,希斯顿认为这与Duraiswami和Dmitry Zotkin(也来自马里兰大学)进行的研究密不可分。“他们真是天才。一些尖端的技术突破是他们首先取得的,其他的则被抛在了后面。”赫克斯顿激动地说。Duraiswami和Zotkin花了十几年的时间完善RealSpace 3D技术,后来花了大量的时间和精力将技术与商业化联系起来。谁曾想到这一切的开始源于一个专门为刚刚失明的士兵设计的项目?
VisiSonics 这家初创公司的成长故事
VisiSonics成立之初,其实主要是生产和销售他们的一款“音频相机”,如图所示,这款相机与笔记本电脑相连。
Duraiswami于1998年加入马里兰大学,决定利用自己的专业知识和工程技术深入音频领域。在最初的一个项目中,他希望通过模拟一个音频环境,有视觉障碍的士兵可以获得听力补偿。在这个项目中,士兵通过虚拟声音识别街角声音和办公室声音,并通过这些声音为自己提供正确的方向感和空间感。在不断地适应和掌握这些声音之后,他们就可以更自由地生活在现实世界中。当时Duraiswami开发了这种如上图所示的“音频摄像头”,以及软件(后来命名为RealSpace 3D),通过软件共同创造了一个音频环境,声音通过耳机传输。
四年前,杜拉斯。
sami 和另外刚刚毕业的学生 Adam O』Donovan 创办了 VisiSonics,刚开始只是生产售卖音频摄像头,但是很快他们意识到这种技术可以应用到好多领域。但如何真的说服这些公司采用他们的技术又是摆在他们面前的一大难题。这个公司只不过是一家来自硅谷,默默无闻的小公司。当时公司相信该技术最适合的领域就是虚拟现实,也注意到了 Oculus,于是他们决定将 Oculus 作为他们进军的第一块敲门砖。公司的优艾设计网_设计模板 CEO Gregg Wilkes,大概花了一年的时间不断尝试跟他们接触。一年过后,努力终于迎来了回报。当时,Duraiswami 和他的同事天天拿着自己的样带跑各种会场,但是一直没有人注意到他们。直到在 2014 年,在旧金山举行的游戏开发员大会上,他们才引起了人们的关注。当时他们在会场连一个摊位都没有,但是海克斯顿就挨着每个摊位走,他身上穿着一件 T 恤,上面写着「如果你想了解真正的 3D 游戏音频的话请和我联系。」另一边,Duraiswami 和 Wilkes 找到了一些没人用的桌子,并且开始找 Ouclus VR 的员工进行他们的 Demo 展示。他们当时几乎不放过任何一丝能够使产品技术曝光的机会。
Haxton 表示:「这就是我们真正进入这个领域的转折点。」
如今,为了让他们的 3D 音频更加生动,Duraiswami 开始研究每一个人的「与头部有关的声音传导机制」。目前,RealSpace 3D 技术可以利用 HRTF 来实现 3D 音频,但是因为我们每个人的头部还有耳朵的形状大小都不相同,而这又会产生声音接收方面的细微差别,所以公司目前决心攻克这个难题,使得 3D 音频对于我们每个人都是同样的栩栩如生。
有了这样的技术做支撑,虚拟现实必定会有进一步的飞跃。VisiSonics 的首席软件工程师罗德·海克斯顿在接受采访时最后说道:「十年,或者二十年之后的人们回望历史,尤其是看我们现在的科技成就,就好比我们现在回望过去的雅达利八比特游戏机似的。虚拟现实现在正在起飞,我们只不过在这股潮流上乘风破浪而已。」
精彩评论