Dialogue Enhancement

概述

自定义个性化的电视节目声音

 

在语音对白与环境声之间实现良好的音量平衡是混音师面临的一大挑战,也是听众日益增多的投诉内容。1Fraunhofer IIS研发了一项与现有技术相兼容的全新技术,该技术能够令听众自主调整声音平衡,以此满足其个人偏好、听音环境以及听觉能力方面的要求。

 

关键事实

  • 使用户能够调整广播节目中各音频元素的音量
    • 实例:调整现场体育报道中赛事解说与赛场环境的音量
    • 效果:提升现场活动环境中的话音清晰度或参与度
  • 提高听力障碍人士专用音频服务设备的成本效益
  • 向后兼容播放默认混音的现有接收机系统

1 英国广播公司商业/技术分析师Phil Greene在2011年12月伦敦响度峰会(Loudness Summit)上所做的对比演讲。

工作原理

Fraunhofer IIS Dialogue Enhancement Workflow
© Photo Fraunhofer IIS

分析源信号(例如话音或音乐),然后将其混入单信号。除下混信号之外,还生成并传输信号关系的参数描述。参数信息使接收机能够单独调整各声音来源的音量,从而改善对话或赛事解说的清晰度。

2011年温布尔登网球锦标赛举行期间,英国广播公司与弗劳恩霍夫集成电路研究所IIS共同开展了一项试验活动,旨在了解对话增强技术的可行性以及 检测用户反应。试验期间,英国广播公司Radio 5 Live互联网流媒体的英国听众可下载一款专用播放器,以此控制赛事解说相对赛场声音的音量水平。此次活动针对播放器开展了用户调查工作。根据调查结果, 多数听众认为调整电视或广播声音平衡的功能颇为实用。此外,表示倾向于增强赛场音效和解说音效的用户各占一半。

更多有关工作原理的信息,请查阅对白增强技术文献

应用

对白增强技术的设计目的是在收听广播电视节目时为观众提供个性化听觉体验,获得更高的语言清晰度。虽然广播电视公司传送的节目版本可能会实现良好的混音平衡,但是这并不一定能保证听众获得满意的听觉体验,因此针对此问题Fraunhofer IIS研究院研发了这项技术。

决定听众对广播电视节目的对白理解程度的几项因素:

 

收听环境

收听环境和还放设备对于听众感知音频混音效果有着相当大的影响。比如,在用耳机收听时,嘈杂的背景音会盖住对白音量,所以此时采用不同的对白与背景音之间的混音比例是必要的。

 

外语

收听外语类节目时注意力更要高度集中。若对白音量高于背景音音量,可使听众听起来不那么费力,有助于提高整体的语言可懂度。实验表明,信噪比(SNR)提高约3dB时,可提高外语对白的清晰度,相当于听众在无信噪比提高的情况下对母语1的可懂度。在某些情况下,若语音材料太复杂,仅仅提高3dB是不够的。根据Warzybok等人的研究,此种情况需要提高5至10 dB,取决于听众的语言能力2

 

听觉能力

提高信噪比(SNR)后,存在听觉障碍的人能同听力正常的人一样去收听和理解广播电视节目。SNR仅提高1dB时,可大幅度提高语言清晰度。
有关提高SNR而产生的效果的更多信息,详见Brand和Kollmeier3的研究。Heger和Holube4以及Kochkin5提供了更多有关听觉损失研究的延伸和发展信息。

 

对白增强技术使电视观众可以根据自己的听觉能力和偏好,自主调节传输过来的音频混音比例,提高电视节目的语音清晰度。

1Florentine, M. 1985., Speech perception in noise by fluent, non‐native listeners. J. Acoust. Soc. Am., Volume 77, Issue S1, pp. S106-S106.

2Warzybok, A. et al., 2010. Influence of the linguistic complexity in relation to speech material on non-native speech perception in noise. DAGA 2010, Berlin.

3Brand, T. and Kollmeier, B., 2002. Efficient adaptive procedures for threshold and concurrent slope estimates for psychophysics and speech intelligibility tests. The Journal of the Acoustical Society of America, 111(6), 2801. doi:10.1121/1.1479152

4Heger, D., and Holube, I., 2010. Wie viele Menschen sind schwerhörig? Zeitschrift für Audiologie, 49(2), pp. 61–70.

5Kochkin, S., 2005. MarkeTrak VII: Hearing loss population tops 31 million people. Hearing Review, 12(7). http://www.betterhearing.org/pdfs/Marketrak7_Kochkin_July05.pdf