什么是空间音频?它与双耳音频有什么关系?

发布时间:2023-03-07 14:43  

作者:Charles Pao, CEVA

在此之前,您可能已经听到一些关于空间音频的信息,但空间音频究竟是什么?这一功能到底有什么魅力,能让 Google、Apple 和 Samsung 等大公司纷纷将它集成到自己的产品中?空间音频和杜比全景声一样吗?这篇文章将详细介绍什么是空间音频,以及为什么我们应该关注它。

1.jpg

音频的历史 

当我们不使用耳机或耳塞时,我们将从 3 个维度聆听声音。声音来自四面八方(上、下、左、右、前、后和它们之间的所有方向),而我们的大脑可以破译这些声音以判断方向。

一个多世纪以来,人们一直在追求能在任何地方模仿这种自然体验的技术。1881 年,一位名为 Clement Ader 的法国工程师发明了 Théâtrophone(剧院电话),该电话使用 80 台送话器连接巴黎歌剧院的整个舞台。这些送话器产生了一种双耳立体声(即一种使用两个麦克风录制声音的方法,这些麦克风可以复制人们在现实生活中感受到的 3D 立体声)。因此,远在两公里外的歌剧爱好者都可以听到这些声音。

在第一次世界大战及第二次世界大战初期,声学在确定飞机方向方面起着很大的作用。每个国家/地区都有自己接收和放大噪音的独特方法,以帮助听到飞机发动机的声音并确定它们的方向。在现在看来,这显得有些滑稽,但显而易见的是,音频是一项关键的战争技术。

大约 30 年后,1972 年 Neumann 发布了他们的第一个商用双耳录音系统,使得在各种应用中复制空间声音变得简单和一致。此后技术和方法都得到了改进,包括引入使用阵列的新技术,而非仅仅使用两个不同的麦克风,以更详细地录制给定空间中的声音。 

如今,先进的音频技术已集成到各种音频应用(从音乐到游戏)的各种设备上,包括条形音箱、耳机、TWS 耳塞、汽车和 XR 设备。

空间音频系列树 

多年来,我们聆听音频的方式也发生了变化。最初从单声道输出开始,就像听收音机一样,所有声音都来自一个来源。然后,声音播放逐渐演变为使用更多的扬声器,为听众提供更具吸引力和更全面的声音体验。

最早的形式是立体声,有两个扬声器,然后发展成 4 个扬声器。后来发展成 5.1、7.1 环绕声(分别有 5 个和 7 个扬声器,1 个播放低频声音的低音炮),以及大型扬声器阵列(超过 7 个扬声器),实现更大的空间输出。

虽然 5.1 和 7.1 环绕声系统模拟您周围的声音,但由于这些扬声器以相同的高度环绕您,因此它只是在您周围的一个平面上。杜比全景声已进入音频空间,为您的上方和下方提供音频提示,打造更加身临其境的体验。 

什么是空间音频? 

这一功能到底有什么魅力,能让 、Apple 和 等大公司纷给将它集成到自己的产品中?空间音频与杜比全景声有何不同?您可能已经注意到,我从未将之前的声音体验称为空间音频。尽管有人会认为,根据词典对空间的定义(与空间有关或占据空间),任何有两个或两个以上扬声器的场景都有理由被称为“空间”。嗯… 我同意这一点。

但是,在本行业中,空间音频是指非常具体的体验类型。您还可能听到它被称为 3D 音频,或者 Samsung 将之称为 360 度音频。与这种体验类型对应的技术术语是头部跟踪双耳音频。我们细说一下。双耳音频是指在一个仿真头的耳朵位置用两个麦克风录音所得到的音频。就像下图所示的 Neumann 头。

Neumann KU-100.png
Neumann KU-100 

这样做可以为您提供与您听到的声音相匹配的音频,因为麦克风位于与普通耳朵相同的位置。

为进一步了解,请查看 Rit Rajarshi 的精彩图解:

来自双耳音频的音频提示.png
来自双耳音频的音频提示 

左边的鸟声传向听者的头部。但是由于人头部的一只耳朵比另一只耳朵距离声源远,所以声音在不同的时间到达两只耳朵。大脑会处理和理解这一时间差,从而为我们提供声音的相对位置。因此,将这些组件放在一起就形成了一个“声音地图”,使您置身于沉浸式空间中。这真的很酷,但它仍然不太现实。这就是头部跟踪组件发挥作用的地方。

在现实世界中,物体在您周围是静止的,声音来自于那些相对于您的头部(随后是耳朵)的位置。比如,您听到了后面的运动场爆发出欢呼声。如果您将头部向左或向右转,您就可以将听力集中到这一声音上,但这并不会改变它的位置。 

同样地,即使在移动后,声音也仍保持在原位。下面的动图显示了双耳音频和头部跟踪双耳音频之间的区别。当您转头时,世界不会随您一起旋转,它还是在原来的地方。 


为什么头部跟踪很重要:双耳音频与头部跟踪双耳音频 

这些组合构成了真正的沉浸式体验,也就是我们在行业中所称的空间音频。

这种体验的另一个部分是头部相关传输函数 (HRTF)。这类算法用于确定当声音到达耳道并向耳道移动时如何反弹、散射和扩散。其中还考虑到了两耳距离。简而言之,这决定了任何给定的独特头部形状对声音的影响,然后对声音进行调整,以使音频提示尽可能真实。

通过将所有这些组件、双耳录音、HRTF 和头部跟踪相结合,您可以获得完整、全面、完全沉浸式的音频体验,产生身临其境的感受。

文章来源于:ECCN    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>