加入星计划,您可以享受以下权益:

  • 创作内容快速变现
  • 行业影响力扩散
  • 作品版权保护
  • 300W+ 专业用户
  • 1.5W+ 优质创作者
  • 5000+ 长期合作伙伴
立即加入
  • 正文
  • 推荐器件
  • 相关推荐
  • 电子产业图谱
申请入驻 产业图谱

VR元年刚刚到来,但Fraunhofer IIS已经准备了很多年

2016/03/25
4
阅读需 23 分钟
加入交流群
扫码加入
获取工程师必备礼包
参与热点资讯讨论

 

3 月 24 日,2016 年中国国际广播电视信息网络展览会(CCBN)在北京拉开帷幕,来自德国的音频和多媒体技术研究机构 Fraunhofer IIS 在大会上展示了成功为全球半数电视机提供环绕声的主流音频技术 HE-AAC,赋予用户更多智能选择权利并带来引人入胜的 3D 声音盛宴的未来电视音频标准 MPEG-H,以及能够为虚拟现实设备带来卓越音频体验的 Fraunhofer Cingo 技术。

对于 Fraunhofer IIS,有些人可能略感到陌生。其实,从 90 年代 mp3 音频格式诞生开始,我们就一直没有离开过 Fraunhofer IIS 的支持。没错,Fraunhofer IIS 就是 mp3 技术、H.264 视频编解码技术以及白光 LED 技术的发明者。

mp3 技术的主要发明者,AAC(高级音频编码)技术的联合开发者

不过,Fraunhofer IIS 并不是一家技术企业,而是德国的一所大型研究机构,同时也是目前欧洲最大的研究机构,来自弗劳恩霍夫应用研究促进协会(Fraunhofer-Gesellschaft)的一个分支部门。Fraunhofer IIS 总部位于德国埃尔兰根,在 40 个不同地方设有 67 个研究院,拥有超过 24,000 名员工,年度研发预算高达 21 亿欧元。

迄今为止,Fraunhofer IIS 在音频编解码领域已经拥有超过 25 年的经验,超过 1000 家公司在使用 Fraunhofer IIS 的授权许可软件,全球超过 80 亿台的设备部署了 HE-AAC 技术。可以说,Fraunhofer IIS 已经成为了通过低比特率传输高质量音频的编码和信号处理领域的权威机构其发明的 mp3 和 AAC 音频编解码技术在移动多媒体系统中无处不在。

目前,Fraunhofer IIS 最引人关注的全新技术包括:提供虚拟环绕音效的 Fraunhofer Cingo、打造车载 3D 音频的 Fraunhofer Symphoria、为电话通话带来 CD 般音质的 AAC-ELD 及 EVS,以及让电视观众能够随意调整节目的背景音量,并享受多维度交互沉浸式音效的 MPEG-H 技术。

有了沉浸式音频,VR 设备的极致体验就成功了一半

Fraunhofer 集成电路研究所(IIS)亚太区市场及业务发展总监 Toni Fiedler 表示,下一代广播电视音频将是互动及沉浸式声音的时代,而沉浸式音频能够为 VR 设备带来极致的体验。

德国 Fraunhofer 集成电路研究所(IIS)亚太区市场及业务发展总监 Toni Fiedler

那么,沉浸式音频究竟对虚拟现实设备有多重要?

Toni Fiedler 解释说,沉浸式音频能够营造出至少 50%的虚拟现实体验。试想一下,如果声音画面不匹配,那么虚拟效果将瞬间消失。所以,音视频之间的脱节问题非常值得关注,只有声音处理得当,用户才能够真正领略身临其境的虚拟现实体验。目前,针对 VR 音频面临的 3D 声音捕获、后期制作、传输、还放这四大技术挑战,Fraunhofer IIS 其实已经做足了多年的技术积累,可以分别提供了沉浸式声音捕获、数字音频工作站、HE-AAC 和 MPEG-H、Fraunhofer Cingo 技术来应对四大挑战。

Fraunhofer 集成电路研究所(IIS)音频和多媒体营销传播总监 Matthias Rose 向媒体介绍,Fraunhofer VR 音频制作工具可以实现在虚拟空间中动态放置基础声道(5.1 声道和 7.1 声道)和声音对象,而 MPEG HE-AAC 技术可以高效传输高质量的立体声或者 5.1 环绕声,目前已经广泛应用并免费提供给 VR 应用开发者使用,包括安卓手机、平板及 iOS、Chromecast、Android TV、Fire TV、Windows 桌面、手机、Mac OS X 以及大多数 HTML5 网页浏览器。

德国 Fraunhofer 集成电路研究所(IIS)音频和多媒体营销传播总监 Matthias Rose

Matthias Rose 解释说,真实的沉浸式声景对于任何 VR 设备都是至关重要的,而它也成为了营造完美虚拟现实体验的决定性因素之一。Cingo 技术的工作原理是结合头部运动计算还放 3D 音频内容,从而为听众营造了一个能够从各个方向感知声音的 3D 空间。

Matthias Rose 强调,凭借 Fraunhofer Cingo 技术,平板电脑和智能手机将能够播放真正的 3D 声音盛宴,包括凭借立体声扬声器或头戴式耳机享受卓越的环绕声或 3D 声音听觉体验、响度优化功能能够将现有的立体声内容变的更为自然和清晰。此外,Cingo 还能够支持头部追踪并且在任何方位和距离对音频对象进行还放。

 

 

在美国阿斯彭(CO)举办的冬季极限运动项目中捕获 3D 声音

 

Fraunhofer VR 音频制作工具

3D audio 加上高度信息 (更多的声道及音频对象) 能够显著提升声场的现实感

据悉,Fraunhofer Cingo 作为一款即用型软件,已全面面向移动设备生产商、芯片供应商和多媒体服务供应商开放。目前已经被 Google Nexus 手机和平板、Samsung Gear VR、LG 360 VR 所采用,同时 Google Play Movies、Korean Telecom、SK Telecom 及 LG U+等服务提供商也在通过 Cingo 实现视频流媒体

观众现场体验 Fraunhofer Cingo 技术支持的 VR 设备

赋予用户更多选择权利的未来电视音频标准-MPEG-H

据介绍,MPEG-H 音频系统专门为未来广播电视和流媒体设备而设计,它能够实现基于对象的沉浸式音频效果。通过 MPEG-H,用户能够根据自己的喜好调节混音并且显著提升声音的真实性和感染力。同时,MPEG-H 能够根据不同的设备和环境定制最佳的声音还放,进而提供“通用传输”。

此外,MPEG-H 音频标准还是 Cingo 3D 音频还放的最佳拍档,它能够在当今传输 2D 环绕声使用的比特率下为移动设备传输身临其境的沉浸式 3D 声音。除了音频声道,MPEG-H 还可以传递音频对象以及高阶高保真环绕立体声信号。

Toni Fiedler 总结到,智能广电已演变为未来广播电视服务的主流趋势,用户期待更多的选择权利以及更加真实的音频内容。能够将 Fraunhofer IIS 的下一代音频技术引入中国,加速中国智慧广电的发展势并为中国用户带来更为极致的电视和流媒体音频体验,我们深感荣幸。

与非网版权所有,请勿转载

更多有关 VR 的资讯,欢迎访问 与非网 VR 技术专区

推荐器件

更多器件
器件型号 数量 器件厂商 器件描述 数据手册 ECAD模型 风险等级 参考价格 更多信息
TPS65950A3ZXNR 1 Texas Instruments Integrated Power Management IC (PMIC) with 3 DC/DCs, 11 LDOs, Audio Codec, USB HS Transceiver 209-NFBGA -40 to 85

ECAD模型

下载ECAD模型
$7.52 查看
STW81200T 1 STMicroelectronics Wide Band Frac-Integer-N Integrated Synthesizer

ECAD模型

下载ECAD模型
暂无数据 查看
SI4707-B20-GM 1 Silicon Laboratories Inc Audio Single Chip Receiver,

ECAD模型

下载ECAD模型
$9.02 查看

相关推荐

电子产业图谱

与非网北京站编辑。志在为网友建设一个技术和产业的知行驿站。并始终相信:技术之外人生以里,有爱便一路同行。