MPEG-H Audio

概述

© Photo Fraunhofer IIS/Viaframe
© Photo Fraunhofer IIS/Viaframe

为电视和VR应用带来交互式及沉浸式声音

 

 

沉浸式和个性化音频

聆听你的主场球队™:MPEG-H Audio系统在带来沉浸式声音体验的同时赋予用户选择的权利,切换不同的音频预设或者调整对白音量。

 

通用传输

在任何设备上,MPEG-H Audio系统都能够带来最佳声音体验。不论是家庭影院、智能手机、平板电脑还是虚拟现实设备。

 

适用于所有应用的技术

MPEG-H Audio为流媒体系统和未来广播电视系统量身定制。

 

下一代公开音频标准

公平定价以及广泛的公开标准开发者社群确保了简单透明的技术获取方式,并为专业人员和消费者带来了快速发展的设备生态系统

 

简单易用

MPEG-H Audio系统适用于当今的流媒体和广播电视设备。其中,沉浸式音效能够通过耳机或在任何扬声器配置下还放。

电视音频

基于MPEG-H Audio的Fraunhofer广播电视交互及沉浸式音频系统

 

聆听你的主场球队™:交互性带来个性化收听体验

通过MPEG-H基于对象的编码技术,我们的系统能够提供交互式音频体验,即用户能够根据自己的喜好调节混音效果,调高难以理解的对白音量或者营造一个“主场球队”的体育节目混音效果。该项技术特征还能够通过增添对白对象实现其他语言播报和视觉识别描述的功能,而每种语言仅需占据20-40 kbit/s的带宽。

 

沉浸式音效带来影院般真实感

该系统能够通过位于前后方的高度扬声器声道以及高阶高保真声场技术传输沉浸式声音。相较于目前的环绕声音效,MPEG-H Audio能够带来与影院级音频系统媲美的,更为真实的沉浸式声音体验。

在未来,用户还能够通过诸如Fraunhofer “3D sound bar”概念原型技术领略沉浸式音效。通过“3D条形音箱”用户不用借助复杂的扬声器布局便可体验高质量的沉浸式声音。

无与伦比的高效编码

全新的MPEG-H Audio编解码器在AAC家族系列编码器的基础上增添了许多新的技术。3D声音所需的额外声道和对象可以在当今5.1环绕声广播电视采用的比特率下进行传输

 

比特率应用于 优秀 推荐 原声质量
22.2 声道 256 512 1200
7.1+4个高度声道+4个对象 200 384 800
5.1声道 96 160 256
2.0声道 32 56 160

 

为所有设备带来卓越的互联网聆听体验

MPEG-H Audio系统能够支持DASH并提供流畅的流媒体和音频I帧,便于DASH比特流的简易切换和拼接。这套系统提供多平台响度控制功能,以在不同设备和环境下为观众带来绝佳的音效体验。

 

扬声器匹配运算还放技术为现有的扬声器配置带来最佳还放效果

系统中的匹配运算还放技术能够在任何扬声器配置下播放任何格式的内容,并且优化用户听音室中摆放位置不佳的扬声器的还放效果。此外,渲染运算能够提供改良的下混技术,进而避免了声道间的信号抵消,还能够为没有高度扬声器的5.1和2.0用户还放一定程度的高度音效。

AAC家族系列:历经15年验证的卓越音频技术,为全球半数以上电视机提供环绕声音效

Fraunhofer电视音频系统构建于15年前,并致力于通过AAC家族系列编解码器为全球用户带来环绕声音效。早在1998年,Fraunhofer设计了应用于日本HDTV中的首个AAC编码硬件,而AAC 5.1解码器已经支持了所有日本的电视机、AVRs和条形音箱。AAC技术目前也应用于NHK电台支持超高清广播的全新22.2声道音频系统中。

广泛应用于多个南美国家的HE-AAC多声道技术也成功应用于了日本基于ISDB的SBTVD系统中,进而为用户带来环绕声效果。目前,巴西的广播电视台,例如TV Globo,也正在使用HE-AAC为用户提供5.1环绕声音效。

此外,HE-AAC也被使用DVB系统的许多国家广泛采用。在2009年AAC家族系列编解码器为英国BBC电视台的高清服务带来了环绕声技术支持。

虚拟现实

为下一代广播电视和VR标准定制的MPEG-H Audio,能够为用户带来超越环绕声的聆听体验。3D声音的沉浸式体验通过在混音中增添高度信息而实现。得益于全新编解码器的高效性,3D声音能够在低于200 kbit/s的比特率下实现,从而使MPEG-H Audio成为VR流媒体服务的卓越之选。

MPEG-H Audio能够支持音频声道、音频对象、高保真音频以及存储于单个音频比特流的元数据。音频声道为传输沉浸式音频创造了卓越的环境,运动的音频对象能够让导演通过音频信号引导用户体验360度全方位声音效果。在这个环境中,他们还能够将声音元素精准定位在听众头部周围以及距听众特定的位置上。此外,高保真音频为沉浸式声场的声音捕获带来了更为便捷的方式,例如现场直播的声音捕获。此外,这一技术还能够更为便捷的实现角度的操纵和还放端的头部转动所带来的声音调整。

MPEG-H Audio能够将沉浸声传输到VR设备端,与之相结合的是Fraunhofer Cingo技术,它能够通过耳机真实的还原3D声音场景。Cingo能够还放添加了高度信息格式的沉浸式3D音频内容,其中包括:5.1+2个高度扬声器,7.1+4个高度扬声器以及类似的声道配置。此外,它还能够还放多个声音对象在虚拟空间中任何位置的定位。

更多Fraunhofer VR技术的信息

Fraunhofer Cingo experience
© Photo Fraunhofer IIS/David Hartfiel

会议论文 (英文)

Development of the MPEG-H TV Audio System for ATSC 3.0

Bleidt et al, 2017 (Written for March 2017 issue of IEEE Transactions on Broadcasting)

Building The World’s Most Complex TV Network (A Test Bed for Broadcasting Immersive and Interactive Audio)

Robert Bleidt, Herbert Thoma, Wolfgang Fiesel, Stefan Kraegeloh, Harald Fuchs, Rinat Zeh, Jim De Fillippis, S. Merrill Weiss - SMTPE Annual Technical Conference, October 2016 (Written for SMPTE Journal©)

Technical Paper: Delivering a complete suite of solutions for the next generation of virtual reality audio

2016

Technical Brief: Installing the MPEG-H Audio Alliance’s New Interactive and Immersive TV Audio System in Professional Production and Distribution Facilities

Robert Bleidt - 2015

MPEG-H 3D Audio - The New Standard for Coding of Immersive Spatial Audio

J. Herre, J. Hilpert, A. Kuntz, and J. Plogsties - IEEE Journal of Selected Topics in Signal Processing (July 2015)

Using Audio Objects and Spatial Audio in Sports Broadcasting

Ulli Scuda, Hanne Stenzel, Dennis Baxter - AES 57th International Conference, March 2015

Design, Coding and Processing of Metadata for Object-Based Interactive Audio

Simone Füg, Andreas Holzer, Christian Borss, Christian Ertel, Michael Kratschmer, Jan Plogsties - AES 137th Convention, October 2014

MPEG-H Audio - The New Standard for Universal Spatial / 3D Audio Coding

Jürgen Herre, Johannes Hilpert, Achim Kuntz, Jan Plogsties - AES 137th Convention, October 2014

Immersive Audio with MPEG 3D Audio - Status and Outlook

Robert Bleidt, Stefan Meltzer, Max Neuendorf, Jan Plogsties - NAB 2014 (Printed in the NAB Broadcast Engineering Conference Proceedings 2014, presented at the 2014 NAB Show.)

Object-Based Audio: Opportunities for Improved Listening Experience and Increased Listener Involvement

Robert Bleidt, Arne Borsum, Harald Fuchs, S. Merrill Weiss - SMPTE 2014 (Written for SMPTE Journal©)

演讲资料 (英文)

Introducing the MPEG-H Audio Alliance's New Interactive and Immersive TV Audio System

Robert Bleidt - HPA Tech Retreat, Palm Springs, February 2015

Starting Production in Interactive and Immersive Sound

Robert Bleidt and Dennis Baxter - Sports Video Group, New York, December 2014

Object-Based Audio: Opportunities for Improved Listening Experience and Increased Listener Involvement

Robert Bleidt - SMTPE Annual Technical Conference, October 2014

Introducing the MPEG-H Audio Alliance's New Interactive and Immersive TV Audio System

Robert Bleidt - AES 137th Convention, October 2014

Immersive Audio with MPEG-H 3D Audio: Status and Outlook

Max Neuendorf, Jan Plogsties, Stefan Meltzer, Robert Bleidt - NAB Convention, April 2014

Case Study: Field Test of Interactive 3D Audio at Winter Sports Broadcast

Hanne Stenzel, Robert Bleidt, Valentin Schilling - DTV Audio / SportsVideo Group Meeting, Las Vegas, April 2014

Fraunhofer's Interactive 3D Audio System for Television Broadcasting – What's New

Robert Bleidt - NAB Convention, April 2014

视频

 

中国电视大会 -- Fraunhofer IIS音频分论坛

 

MPEG-H 音频联盟在2015年NAB展会上以直播方式演示新系统应用

新闻

Request licensing information: MPEG-H Audio

To request a price quote or an evaluation license, please fill in and submit the form.

* Required

Which kind of license are you interested in?
Software platform:
Hardware platform
Title
Name