Google、三星、Arm跟开放媒体同盟联手打造Eclipsa
栏目:行业动态 发布时间:2025-01-14 08:33
[db:摘要]...
试想一下,你正坐在客堂里不雅看片子,此时画面中有一架直升机飞过,你能够听到直升机的声响仿若就在你头顶上方挪动,从房间的一侧到另一侧,营建出真正身临其境的不雅影休会。得益于基于沉迷式音频模子跟格局 (IAMF, Immersive Audio Model and Formats) 的新开源音频技巧 Eclipsa Audio™,上述的听觉休会已能实现。无论是搭配了高端电视的高级影院体系,仍是入门级挪动装备跟电视,该技巧可能在多种罕见花费电子产物中疾速高效地处置此类需要。本文援用地点:该技巧于往年国际花费类电子产物博览会 (CES) 上推出,由 Google、三星、Arm 跟开放媒体同盟(开辟了 AV1 视频格局的构造)独特打造。什么是Eclipsa Audio?Eclipsa Audio 是一种多声道音频围绕格局,应用 IAMF 技巧供给沉迷式凝听休会。该技巧经由过程垂直跟程度传布音频,改革了听觉休会。这种三维音景高度模仿天然情况,使片子、电视节目跟音乐中的声响表示更为活泼真切。Eclipsa Audio 会依据差别场景静态调剂音频,从而确保浮现最佳音质。别的,该技巧还供给定制功效,使听众可能根据团体偏好调理声响,进而取得特性化及奇特的听觉休会。一个 Eclipsa Audio 比特流最多能够包括 28 个输入通道,这些通道被衬着到一组输出扬声器或耳机。这些输入声道能够是牢固的,如管弦乐队中的麦克风;也能够是静态的,如举措片子中直升机穿过声场。Eclipsa Audio 具有双耳衬着功效,这对经由过程耳机供给沉迷式音频的挪动端利用至关主要。别的,这种新的音频技巧支撑跨花费类装备停止内容创立,应用户可能自行构建沉迷式音频休会。Arm与Google在IAMF开辟的配合历在 IAMF 开辟进程中,Arm 作为策略配合搭档,与 Google 团队亲密合作,以优化该技巧的机能。Arm 的任务重点在于进步 Opus 编解码器跟 IAMF 库 (libiamf) 的效力,确保其在当今普遍利用于挪动装备跟电视中的 Arm CPU 上实现最佳机能。自 2005 年以来,Arm CPU 曾经集成了 Neon SIMD 扩大,而且在此之后获得了明显开展,使得音频跟视频处置等数字旌旗灯号处置 (DSP) 义务实现了机能跃升。针对 IAMF,Arm 的工程师努力于技巧优化,使其可能在最低 CPU 应用率下及时解码庞杂的比特流,如斯一来,即便 CPU 正在处置休会中的其余义务,也能确保牢靠的机能。这对重视能效的挪动端利用尤为主要。机能加强Arm始终在为opus-codec跟libiamf进级补丁,专一于浮点实现,以实现最佳机能。这些加强包含:●   Neon Intrinsic优化:该优化支撑多种 Arm 架构(包含 Armv7 + Neon、Armv8-A32、Armv8-A64 跟 Armv9),从而减速了浮点到 INT16 的转换跟软削波。别的,还为多通道扬声器输出中的矩阵乘法跟通道解紧缩供给了 CPU 特定的优化。●   机能晋升:在 Quartz64 跟 Google Pixel 7 等装备上,差别扬声器设置(如破体声、5.1、9.1.6)都有明显的机能晋升。举例来说,9.1.6 的输出在 Pixel 7 的 Arm Cortex-A55 CPU 中心上机能晋升超越了 160%。●   解码效力:经优化后,全部测试文件在 AArch64 上的解码时光少于及时的 16%,而在 AArch32 上则少于及时的 23%,使其在 Cortex-A55 处置器上极为高效。中心技巧IAMF 支撑多种音频编码格局,包含 LPCM、AAC、FLAC 跟 Opus。此中,Opus 是以后最时新的编解码器,平日被以为是首选。Arm 针对 Arm 架构对 Opus 停止了进一步优化,从而确保其在 IAMF 框架内高效运转。IAMF 库 (libiamf) 担任解码 IAMF 比特流,并为各种音响体系天生扬声器输出。Arm 引入了一种 CPU 公用化框架,经由过程编译时特点检测,确保该库针对其运转的平台停止了优化。经由过程对 Opus 编解码器跟 libiamf 库等要害组件停止优化,Arm 的工程师确保了 IAMF 在 Arm CPU 上可能供给出色的机能。这不只晋升了用户休会,也表现了 Arm 的技巧在前沿利用中的主要代价。开放媒体同盟支撑的 IAMF 开放尺度方式,与 Arm 供给普遍可拜访性跟推进翻新的愿景高度符合。此次配合凸显了 Arm 在推进沉迷式音频技巧将来方面的主要感化,为包含高端家庭影院体系、入门级挪动装备跟电视等在内的种种现有及将来装备,供给高品质的音频休会。沉迷式音频的将来就在这里IAMF 彰显了沉迷式音频技巧的严重奔腾,经由过程应用人工智能 (AI) 跟深度进修技巧以及 Arm 支撑的强盛机能优化,供给多功效跟高品质的音频休会。沉迷式音频的将来曾经到来,而且变得愈加触手可及。无论你是一般听众仍是音响发热友,IAMF 将为你带来史无前例的沉迷式音频休会。