三星可能最终在其 2022-2023 款电视型号中采用了杜比全景声 (Dolby Atmos),但与此同时,这家韩国公司已与谷歌合作开发替代方案。
这项新的音频技术被称为沉浸式音频模型和格式 (IAMF),三星现在公开分享 2020 年开始的工作的详细信息。
三星表示:“三星电子的高级研究机构 Samsung Research 自 2020 年以来一直致力于普及 3D 音频。为此,三星与谷歌合作,共同开发沉浸式音频模型和格式 (IAMF)”。
开源 3D 音频
空间音频(或 3D 音频)并不是新技术,它已经以基于对象的音频格式 Dolby Atmos 和某种程度上的 DTS:X 的形式得到了广泛部署。支持 Atmos 和 DTS:X 的电视、条形音箱、接收器和耳机已经面世多年。
不过,三星指出,IAMF 是第一个开源空间音频技术。它于 2023 年 10 月被开放媒体联盟 (AOM) 采用,该联盟也支持 AV1 视频格式。谷歌和三星都是 AOM 的成员。
三星解释说,IAMF 有 3 个核心功能:
1. 垂直声音
2.AI场景分析
3.用户定制音频
IAMF的用户定制音频的概念
三星研究院视觉技术团队的 WooHyun Nam 说道:“因此,当 IAMF 技术应用于家庭电视扬声器和条形音箱时,听众可以在家里的电视上听到鸟儿从头顶飞过的声音,”并补充道:“为了让人们能够自由地利用3D音频技术创作内容,相关技术需要向所有人开放。为3D音频提供完整的开源框架,从创作到交付和播放,将允许更加多样化的音频未来的内容体验。”
理想的合作伙伴
三星生产电视、条形音箱、耳机和其他类型的消费设备,而谷歌则开发移动 Android 和 Google TV 等平台。
到目前为止,三星尚未在其电视中使用 Android TV 或 Google TV,但该公司仍然将 Google 视为开发新音频技术的理想合作伙伴。
三星研究院执行副总裁兼视觉技术主管 JeongHoon Park 表示:“三星和 Google 各自在设备和内容方面的专业知识使两家公司成为创建 IAMF 技术的理想合作伙伴。” “通过共同开发这项前所未有的技术,我们正在为消费者在家中享受 3D 音频铺平道路。”
反对杜比的统一战线
这并不是我们第一次听说谷歌和三星在音频和视频领域的合作。2022 年,“Project Caviar”的细节被泄露,这是两家公司共同努力推出杜比视界和全景声的免版税替代方案。
视频方面,涉及HDR10+,而IAMF似乎是Project Caviar下的音频技术。
尽管如此,三星和谷歌的努力似乎遇到了一些障碍。三星的任何电视仍然不支持杜比视界,但它在2022 年型号的电视中首次实现了对杜比全景声的支持。也许我们会在 1 月份的 CES 2024 上听到更多有关 IAMF 的信息——希望能有一个更好的名字。
沉浸式音频模型和格式 (IAMF)
用三星自己的话说:
1. 垂直表达声音的能力
之前的开源音频编解码器仅支持水平声音表达。借助IAMF技术,音频现在可以垂直表达,从而使声音变得越来越多向。
2. 基于AI的场景分析和3D音频效果
IAMF 利用人工智能和深度学习技术来分析场景并强调内容的某些方面 - 调整音频电平以在整个观看体验中增强声音。 此外,即使设备环境发生变化,IAMF 技术也能提供最佳声音。
3. 高度定制的音频
通过IAMF技术,用户将能够根据自己的喜好自由调节声音。无论观众想要放大动作场景的音效还是增强对话,IAMF 都可以让他们灵活地定制内容音频,以获得更加个性化的体验。
拓展阅读:杜比全景声、DTS:X、Auro 3D、IMAX Enhanced的区别
资深发烧友评论:
自2005年引入Auro-3D的时候,比起之后的 Atmos 和 DTS:X,Auro-3D很难在蓝光光盘或流媒体平台上取代它们。现在关于 IAMF 的未来谁也无法预料,不过三星在其开源视频格式 HDR 10+ 上获得了有限的成功。我选择了一个5.2.4的配置,通过在我Marantz SR7013的扬声器布局部分将我的四个顶部扬声器设为“前置高度”和“后置高度”,从而使其具备作为一个 Atmos/Auro-3D/DTS-X系统的灵活性。对于非原生3D音频内容来说,很多情况取决于来源混音的质量,我个人更喜欢我Marantz上的Auro-3D混音效果用于音乐,但是原生内容几乎不存在,特别是在美国。当 Atmos 编码良好的时候,尤其是流媒体方面,它对于电影来说非常出色。可惜,并不是所有电影都以4K蓝光的形式发布,因为通常你可以在 Atmos 和 DTS 的音轨之间进行选择。
很多人(包括我)认为 Dolby Atmos 越来越受欢迎是因为 Dolby 在提供较为廉价的布局时妥协了真正身临其境的音频体验,例如只使用两个上方扬声器,就像5.1.2那样,或者使用附加的反射扬声器将部分声音反射到天花板并回到听众耳边。在购买真正定向式的上方扬声器之前,我有4个这样的扬声器,虽然它们价格更低且安装更快捷,但效果不如理想。Auro-3D 和 DTS 没有提供像最低9个扬声器配置一样的更为经济的选择,大多数人不愿意花费时间和金钱去购买这样的系统,或者没有足够的空间,因此 Dolby 成为了沉浸式音频的主要供应商。这是我作为一个隐藏的发烧友40多年来的经验,不过如同任何事物,个人的体验可能因人而异。 我希望他们失败,而且失败得彻底。那些吝啬的家伙就是不愿花钱,他们试图通过开源来规避这个问题。幸好三星不再是之前那个大量销售电视的公司了,现在又有竞争对手了,所以他们可以继续使用没人在乎的HDR 10 Plus。
我不会再买三星电视,所以这对我没有影响。我担心的是这两家大公司在企图破坏Dolby Vision和Atmos这些令人惊叹的技术。Dolby开发了这些新的声音技术,现在这些廉价的大公司只想推出一个免费版本。这种情况的好处是,Dolby非常专注于他们的技术,而三星和谷歌只是想要省钱。他们不是在帮助顾客,他们只是在对自己的口袋有所帮助。
总而言之,从他们的做法中你不会得到任何更好的东西,而且很可能更糟,因为Dolby已经拥有关键的专利...他们已经做了所有的工作。
而现在,DTS、Dolby Vision和Dolby音频在电视和收音机上使用起来更加容易了?谷歌和三星唯一能告诉其他原始设备制造商的就是它是免费的。没人会在乎这个。 相对于Google和三星而言,Dolby是一家很小的公司,历史上专注于一个目标:为所有观众改善电影的音频和视频,无论是在电影院还是在家庭系统中。他们并不孤单,还有其他一些小而专注、致力于音频和视频质量的公司存在或曾经存在过。只是Dolby在(非常)长期的竞争中获胜了。
Google和三星不属于这个小型、专注、有创新力的音视频公司群体。它们起初一个专注于通过网络搜索赚钱(非常成功),另一个则一直是一家大量生产低质量消费电子产品的公司,在取得巨大成功后才推出了一些一流的消费电子设备。
这并不意味着没有人能够击败Dolby的游戏规则。但是相比于两个只寻求降低成本的巨头,我更相信Dolby能够提供更好的音频和视频。如果他们收购了一个长期存在的Dolby竞争对手,比如DTS,并从那里开始,我会对他们的努力更有信心。 |