Fraunhofer(프라운호퍼) upHear® 입체음향 마이크 처리기술

개요

Fraunhofer 입체음향 캡쳐 알고리즘은 전문가용 및 일반 소비자용 360도 카메라의 내장형 마이크를 사용하여 사운드 캡쳐 기능을 크게 향상시켜 줍니다.

이는 Fraunhofer의 몰입형 음향 솔루션인 upHear®(어피어) 브랜드를 달고 출시되는 최초의 기술입니다.

캡쳐된 사운드는 실시간으로 FOA, HOA, 5.1 채널, 7.1 + 4(4Height)채널 등 서라운드 또는 몰입형 오디오 포맷으로 변환되며, 이 때 오디오 장면(scene)은 그대로 보존됩니다.

 

문제점

시중에서 판매 중인360도 카메라들은 그 기능이 나날이 발전하고 있지만, 입체 음향을 재현하는데 필요한 사운드 캡쳐 기능을 지원하지 않는 경우가 많습니다. 즉, 오디오는 여전히 모노 혹은 스테레오 정도로 한정되어 있습니다.

기존의 입체음향 캡쳐는 복잡한 마이크 어레이(microphone arrays)나 고가의 앰비소닉(ambisonics) 마이크를 통해서 이루어져 왔습니다. 또한, 이러한 장비를 사용할 수 있는 숙련된 인력이 필요했고, 장비가 카메라의 화각을 가리지 않도록 주의를 기울여야 했습니다. 대부분의 외장형 마이크는 비좁은 공간에 카메라를 설치한다거나 한 장면에서 다른 장면으로 재빨리 카메라를 이동해야 하는 주변환경 변수를 고려하지 않았습니다.

이러한 문제점들로 인해 입체음향 캡쳐는 시간 소모가 크고 실수가 잦아 전문가들만이 할 수 있는 작업으로 인식되어 왔습니다.

 

장점

카메라 사용자라면 누구나 Fraunhofer의 입체음향 마이크 처리기술을 통해 손쉽게 입체음향을 캡쳐하여 비디오 컨텐츠에 생동감을 더할 수 있습니다.

전문 컨텐츠 제작자

전문 컨텐츠 제작자들은 Fraunhofer의 오디오 기술을 통해 정확한 위치 정보가 담긴 고품질 입체음향과 촬영장 분위기를 전달하는 주변음까지 캡쳐할 수 있습니다. 후반작업 단계에서 보이스오버(voice-over), 동적 객체(dynamic object) 등 추가적인 사운드 구성요소가 캡쳐된 오디오 장면에 삽입됩니다.

일반 소비자

대부분의 소비자들은 사용 편리성이 높고 고품질 녹음을 지원하는 제품을 찾고 있습니다. 소비자용 카메라에 탑재된 Fraunhofer의 입체음향 캡쳐기술을 통해 버튼 한번에 비디오를 보완하는 몰입형 사운드를 캡쳐할 수 있습니다.

제품 특징

제조사 제품에 적용되는 특징

  • 특정 카메라 또는 휴대폰 설계에 최적화된 입체음향 캡쳐기술
  • 기기, 앱, 후반작업 소프트웨어에서 구동 가능
  • 모바일 플랫폼에서 리소스 최적화

일반 소비자에 제공되는 특징

  • 유튜브 및 페이스북에 업로드 할 수 있는 입체오디오 포맷 출력
  • 기기에서 직접 라이브 스트리밍이 가능한 실시간 오디오 출력
  • 지향성 사운드 및 주변음의 정확한 캡쳐

마이크 요구사항

Fraunhofer 입체음향 마이크 처리기술은 기기의 몸체 및 마이크 설정에 맞게 조정되어 제품 설계상의 유연성을 제공하며 최적화된 녹화 환경을 보장합니다.

기기에 필요한 마이크의 수는 통상적으로 3개(일반 소비자 기기)에서 8개(전문가용 기기) 사이입니다. 아래의 설정은 단순한 예시입니다.

가용성

입체음향 캡쳐 알고리즘은 다음 플랫폼에 최적화된 라이브러리로 제공됩니다.

  • 데스크탑 소프트웨어(Windows/Mac)
  • 모바일 앱(iOS/Android)
  • 임베디드 시스템(ARM Cortex 등)

해당 알고리즘은 360도 카메라 및 휴대폰 카메라 제조사들에게 라이선싱 형태로 제공됩니다.

upHear® 기술문의

사용하고 계신 기기의 마이크 배치 및 입체음향 기능에 대한 상담을 원하시는 경우 문의 바랍니다.