Fraunhofer upHear Spatial Audio Microphone Processing

Heute wird von jeder Tonaufnahme ein natürlicher, gleichmäßiger und immersiven Klang erwartet – ganz gleich, ob sie mit professionellen oder Consumer-Geräten gemacht wird. Das bedeutet, dass sogar die eingebauten Mikrofone von 360°-Kameras und anderen mobilen Geräten High-End-Aufnahmen liefern müssen. Aus diesem Grund hat Fraunhofer mit upHear Spatial Audio Microphone Processing einen Algorithmus zur räumlichen Klangerfassung entwickelt. Mit räumlicher Klangverarbeitung erzeugt die Software einen hochauflösenden, immersiven Klang, der dem ursprünglichen Hörerlebnis genau entspricht.

Dies wird hauptsächlich durch drei Funktionen erreicht: Direktionale Schallquellen wie Sprache, markante Instrumente und Schallereignisse werden mit hoher Präzision lokalisiert. Gleichzeitig werden gewünschte Umgebungsgeräusche wie die Hintergrundatmosphäre eines Stadions oder der Nachhall einer Konzerthalle aufgenommen. Durch die hohe Qualität der Klangverarbeitung gibt es zudem keine hörbaren Artefakte. Zusammen sorgen diese Eigenschaften für High-End-Klang auch aus sehr kompakten Geräten und Mikrofonaufbauten.

Fraunhofer upHear Spatial Audio Microphone Processing ist die erste Audiotechnologie der Fraunhofer-Marke upHear, die für immersive Audio-Innovationen steht. Der Algorithmus bewahrt die Authentizität einer Audioszene während er den aufgenommenen Ton in Echtzeit automatisch in jedes gängige Surround- oder Immersive-Audio-Wiedergabeformat umwandelt, etwa in FOA, HOA, 5.1-Kanäle und 7.1+4 Höhenkanäle.

Inhalte für Social Media

• Aufnahme von Audio-Blogs für Social-Media-Plattformen
• Hervorragende Sprachqualität und Sprachverständlichkeit auch bei Verwendung relativ einfacher Mikrofone und bei Aufnahmen aus größerer Entfernung
• Keine externen Mikrofone erforderlich, da die in Kameras oder Smartphones eingebauten Mikrofone bei Verwendung der Fraunhofer-Technologie eine ausreichende Tonqualität liefern können

Videoaufnahmen mit dem Handy

• Audio-Zoom für Echtzeit-Fokussierung auf die gewünschte Schallquelle vor der Kamera und Abschwächung von unerwünschten Störgeräuschen von der Seite oder von hinten
• Ermöglicht das Herauszoomen zur Aufnahme von immersivem Raumklang
• SAMP-Mono-Upmix ermöglicht hochwertige immersive Musikaufnahmen mit jedem Smartphone

Konzertaufnahmen

• Hochwertige, immersive Raumklang-Aufnahmen mit kompakten Geräten
• Ermöglicht die Wiederherstellung des ursprünglichen Raumeindrucks beim Konzert
• Ermöglicht eine klare Lokalisierung der Musik sowie einen immersiven Eindruck vom Ambiente (etwa durch Jubelgeräusche der Menge, Applaus und den Nachhall des Konzertsaals)

Aufnahmen von Sportveranstaltungen

• Windgeräuschunterdrückung ermöglicht die Aufnahme von Sportveranstaltungen im Freien
• Immersive Tonaufnahme sorgt dafür, dass der ursprüngliche Eindruck (z. B. die Stadionatmosphäre) wiederhergestellt wird

VR- und AR-Audio

• Immersiven räumlichen 3D-Sound für VR-Anwendugen festhalten
• Maßgeschneiderte Mikrofon-Setups ermöglichen es, die Mikrofone auf der Videokamera so anzubringen, dass sie nicht im Sichtfeld der Kamera erscheinen und dennoch hochauflösenden Raumklang erfassen

Sprachaufnahmen

• Aufzeichnung von Interviews mit hoher Sprachverständlichkeit
• Einsetzbar als Front-End-Processing für Videokonferenzsysteme
• upHear SAMP-Technologien zur Verbesserung des Sprachklangs werden in upHear VQE verwendet