Fraunhofer upHear 空间音频麦克风信号处理技术

关于

如今的消费者期望在专业和消费类设备上均能收听到身临其境的节目内容。这就意味着诸如360° 摄像头等移动设备内置的麦克风需要具备高端的声音拾取能力。这也是 Fraunhofer 开发 upHear 空间音频麦克风处理技术及其空间音频拾取算法的原因。该软件能够通过空间音频处理创建高解析度且身临其境的空间音效从而重现原始音频体验。

上述体验主要通过三个主要特性实现:定向声源,例如语音信源、独特的乐器和具备高精度定位的突出声音事件。同时,需要如体育场背景声或音乐厅混响等环境声。此外,没有可轻易觉察的人工处理痕迹的高质量声音处理。满足上述特性,即便在非常紧凑的设备和麦克风配置中也能实现高品质音效。

Fraunhofer upHear空间音频麦克风处理技术是 Fraunhofer upHear沉浸式音频创新品牌旗下推出的首个音频技术。该算法能够将拾取的声音实时自动转换为任何环绕声或沉浸式音频的还放格式,并保留音频场景的真实性,例如:FOA, HOA, 5.1声道, 以及7.1+4 个高度声道。

特征

降噪

自动降噪消除背景噪音,确保在语音质量和降噪性能之间取得最佳平衡

波束赋形

自适应信号波束赋形,高质量拾取所需的声音同时衰减不需要的干扰声

去混响

在室内拾取远处的语音源时,去混响算法可减少混响声音以提高语音清晰度

声音均衡 (EQ)

由经验丰富的Fraunhofer音频工程师改善声音听感和独立调音

降低风噪

自动降低风噪检测功能在降低风噪的同时保持最佳语音质量

自动增益控制 (AGC) 和动态范围控制 (DRC)

自动增益控制和动态范围控制可确保不同信号内容的最佳输出响度且独立于声源

音频缩放

音频缩放技术可在放大时实时聚焦特定音源,也可在缩小时还原身临其境的空间音频效果

定制音频

定制的算法和实时调优选项可以根据用户的需要调整声音处理的任何方面

upHear产品系列

upHear麦克风处理技术可用于upHear 产品系列的各种产品中。在此处了解更多信息:

益处

Fraunhofer空间音频麦克风处理技术使每个人都能以简单而强大的方式通过空间音频增强视频内容效果。

 

专业的内容创作者

凭借Fraunhofer的专业音频知识,内容创作者可以轻松获得高质量且定位准确的三维声和带有场景氛围的环境声。在后期制作过程中,音频场景信息可以与其他声音元素(例如画外音或动态对象)相结合。

 

消费者

消费者需要简单易用且具备高质量录音功能的设备,在消费类摄像头中集成Fraunhofer空间音频拾取技术便可满足这一需求。用户只需按下拍摄按钮即可捕捉到与视频相匹配的沉浸式声音。

 

制造商

Fraunhofer空间音频麦克风处理技术为消费电子类产品制造商提供了可供选择的输入和输出源。

Fraunhofer算法可以适配任何特定的麦克风几何形状,无论是典型的自定义麦克风排列方式(可在智能手机或运动相机等设备中找到)还是多麦克风几何阵列(例如线性麦克风阵列、圆形和球形麦克风阵列以及 B-format麦克风)。

upHear技术在输出方面也很灵活:它可以输出各种格式的空间音频,包括基于声道的音频(如 2.0、5.1、22.2)和 Ambisonics(FOA、HOA)。此外,如果麦克风几何阵列未知并且仅有一个麦克风可用时也可以进行相应的音频处理(当然效果会有一些局限)。

应用

© Photo Monkey Business - stock.adobe.com

社交媒体内容的录音

  • 为社交媒体平台录制音频内容
  • 即使在使用入门级麦克风和远距离录音时,也具有出色的语音质量和清晰度
  • 无需外接麦克风,内置于相机或智能手机内的麦克风在使用Fraunhofer 处理技术时也能提供足够的音质水平

 

手机录像

  • 音频变焦,实时聚焦于摄像机前方所需的声源,并衰减来自侧面或后面的不需要的干扰声音
  • 启用音频缩小功能以获取身临其境的空间声音
  • SAMP单声道上混可在任何智能手机上实现高质量的沉浸式音乐录音

演唱会录音

  • 通过小型设备实现高品质且身临其境的空间声音拾取
  • 重现演唱会现场的空间音频印象
  • 音乐定位清晰,氛围感十足(如人群的欢呼声、掌声和音乐厅的回响)

 

体育赛事录音

  • 降低风噪,拾取户外运动赛事音频
  • 身临其境的声音拾取,还放现场级效果(如体育场氛围音效)
© Photo Евгений Вдовин - stock.adobe.com
© Photo pikselstock - stock.adobe.com

VR和AR音频

  • 为 VR 应用拾取身临其境的空间 3D 声音
  • 自定义麦克风设置可以隐藏摄像机上的麦克风,使其在摄像机的视野中不可见,同时仍然能够拾取高分辨率的空间音频

 

演讲录音

  • 实现语音清晰度的采访录音
  • 可作为视频会议系统的前端处理技术
  • upHear VQE采用upHear SAMP语音增强技术

更多信息

对upHear感兴趣?

有关设备的麦克风摆放和空间音频功能的相关问题:

最新研究

我们始终将信号处理领域的创新成果整合在一起,从而使该技术始终保持在最先进的水平。有关最新的演示,请查看

虚拟陈列室

返回消费电子页面