资料介绍
就像对ARKit的3D模型(usdz)所做的那样,Apple正在开发一种新的音频格式,即使在用户移动,戴着“ Apple Glass ”或其他AR设备时,也可以更轻松沉浸式地在用户周围放置“3d声音”。
以前已经证明Apple在为AR制作高分辨率视频图像,现在它也致力于与之配套产生高质量的音频。在新的专利申请中,该公司正在研究与空间音频有关的工作。
具体来说,Apple希望建立一种音频格式,例如.MP3或.AAC,并结合了AR所需的额外空间信息。该格式不仅需要包含实际的音频,而且还远远超出在立体声图片的左侧还是右侧播放元素的范围。苹果以前曾与皮克斯合作开发一种名为USDZ的格式,该格式用于将音频放置在用户周围的3D空间中。
“在增强现实(AR),虚拟现实(VR)和混合现实(MR)应用程序中产生三维(3D)声音效果是具有挑战性的……因为现有的音频格式最初是为在物理环境中产生3D声音而设计的具有固定的扬声器位置和固定的听众。”
苹果将AR,VR和MR统称为“模拟现实”(SR),并表示希望在许多现有3D音频格式的基础上发展。例如,旨在产生3D声音的空间音频格式包括MPEG-H 3D音频标准,HOA空间音频技术和DOLBY ATMOS环绕声技术。
问题既与观众感知声音的位置有关,也与创作者可以选择放置效果或音乐的地方有关。苹果公司说:“在SR环境中产生3D声音效果的一种替代方法是操纵音频对象中包含的各个离散声音,这些声音实际上可以位于3D环境中的任何位置。”
苹果公司提出的解决方案是创建一种格式,该格式类似于.m4v和.mp4是将不同元素组合在一起的格式。对于苹果公司对空间音频的新要求,该公司建议创建一个音频资产库,其中包括资产元数据,使模拟现实(SR)应用程序开发人员能够为SR应用程序编写声音。”
苹果公司说:“音频经过了格式化,包括音频数据,这些数据编码了能够被编入SR应用程序的声音,以及资产元数据,不仅描述了声音的编码方式,而且还描述了SR环境中听众的感受。
另外Facebook Reality Labs研究小组最近也分享了一些关于AR的音频项目。该小组的目标是将技术融入到AR眼镜中,通过在嘈杂的环境中轻松隔离对话声音,增强你的听力,并能够重现虚拟声音,让它们看起来像是来自你周围的真实世界。自定义的HRTF是提供这种体验的关键,它是每个人根据头部和耳朵形状听到声音的独特方式的数字版本,但这个过程既耗时又昂贵。该团队正在研究一种可扩展的解决方案,可以从你的耳朵的一张简单照片生成精确的HRTF。
Facebook Reality Labs(简称FRL)是Facebook最新采用的名称,该团队致力于开发沉浸式技术(包括Oculus眼镜)。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 适用于AR眼镜的TI DLP® Pico™技术
- 苹果ios蓝牙调试助手工具源代码下载 7次下载
- 基于MATLAB的数值方法英文资料下载 0次下载
- 基于Matlab的机构与机器人分析资料下载 11次下载
- 增强现实(AR)底层技术算法特点资料下载
- 什么是高压LED资料下载
- 什么是移动 USB?资料下载
- 增强现实AR硬件五种常见跟踪器应用实例资料下载
- 苹果为什么屏蔽北斗?资料下载
- OLED的优缺点资料下载
- Android电源管理设计资料下载
- 解读Facebook Oculus VR手势追踪资料下载
- AR9580应用原理图的详细资料免费下载 42次下载
- JMACS的AR应用功能需求方案的详细资料免费下载 14次下载
- 苹果5代镜头结构图资料下载.pdf 2次下载
- AR/VR眼镜塑胶镜片注塑成型的基本流程 1492次阅读
- 主流AR眼镜中的显示技术有哪些? 1413次阅读
- 华为这款智能眼镜有多么优秀 7565次阅读
- Facebook与CMU联手打造开源框架PyRobot 3746次阅读
- 什么是AR?AR基础知识解答 1w次阅读
- 美国航空航天制造商利用AR眼镜进行宇宙飞船装配工作 2619次阅读
- Facebook开发出可自动生成食谱的AI系统 4143次阅读
- Rokid推出全新黑科技AR眼镜Rokid Glass 5805次阅读
- 数码眼镜diy制作教程 超炫酷 3552次阅读
- AR到底为何物?AR技术和应用如何演进,以及它为何如此重要 8293次阅读
- 介绍Facebook在机器学习方面的软硬件基础架构,来满足其全球规模的运算需求 4185次阅读
- TweetReality:首款将Twitter放入AR空间的应用程序 5093次阅读
- 深度揭示 Facebook 内部支持机器学习的硬件和软件基础架构 4612次阅读
- 技术流剖析-之AR眼镜 4693次阅读
- 【低成本】手把手教你制作Google Cardboard虚拟现实眼镜 4.4w次阅读
下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 92次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7蓝牙设备在嵌入式领域的广泛应用
- 0.63 MB | 3次下载 | 免费
- 89天练会电子电路识图
- 5.91 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233045次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
评论
查看更多