0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

你知道吗?VR中是把游戏音频放在聚光灯里!

Dbwd_Imgtec 来源:未知 作者:伍文辉 2018-03-28 14:10 次阅读

存在感

人们挂在嘴边来描述VR(虚拟现实)的单词是“沉浸感”。的确是很酷的一个词。然而为实现这终极目标,开发者需要在虚拟现实的环境中模拟身体的知觉,我们称着为存在感。存在是一种心理状态或主观感知,其中,部分或整体个人体验感受是/或是通过人造的科技过滤产生的,部分或整体体验是/或是由在体验中对角色的精确认知导致人为认知衰退造成的。

创造这个级别的真实体验确实是一个挑战。当前的图形比之前几年有了巨大的进步,音频仍然有很长的路要走,以达到其在这个新的和仍在发展的VR领域中发挥主要作用的真正潜力。

在VR游戏中空间包围和多感官应用

在独立和PC游戏中,沉浸感被分为三项:叙事性沉浸(玩家投入到故事中去),战术沉浸(玩家执行涉及到技能的操作)和策略沉浸(更专注,与精力挑战)。然而在VR中,又添加了第四项:空间沉浸,也就是说玩家在人造的世界中对他们来说是真实的。在包括前三项的沉浸感中,当涉及到存在感和提供可信性和沉浸的环境中,空间沉浸变的非常重要。

人为了生理上对自己定位,我们的视觉系统通常被用来帮助身体感觉环境,耳朵提供了关于我们周围环境的重要信息,味觉也同样提供周围信息。

音频在某角度来说比视觉更好,因为不受视觉范围的限制,而是对我们周围环境信息提供了360度的反馈。

为创建真实空间的沉浸感,理想情况下,我们希望可以利用我们的五官,且有全感觉加工处理(在一个环境中有效的使用我们的身体的过程)。问题在于当前阶段的VR开放,我们不可能使用全部的五官感觉。视觉和听觉做为了主要的因素,触觉不是很有效,味觉和气味完全没有用武之地。在这种情况下,听觉也许是我们可以开发的用来“影响”用户大脑的最强大的媒介了,创建一个完整的360度体验,提高空间沉浸,由于它是通过一个虚拟的源通过模拟声学来呈现一个现实的空间(这个在场景中或实际中不是必须的)。

360度的体验创建空间沉浸

实现音频增强空间沉浸感的第一步是音频定位。从最近的研究(Skalski & Whitbred, 2010)中出现一个模式表明,在游戏中(环绕立体声)中,更好的音源位置对玩家空间沉浸感和享受的影响比视频质量(高清VS普清)要大的多。

大脑通过我们两只耳朵之间的响度,音调和时间的细微差别来定位声源在三维中的位置(水平,垂直和距离)。在虚拟现实中,玩家确实在场景中间,因此在模拟声音环境中决定声源位置的过程,对创建自然听觉体验音频改进是最重要的。

在媒体史的早起,我们发现人耳第一次双耳录音来拾取三维音频可追溯到1881年。

“双耳录制是一种使用两个麦克风录制声音的方法,旨在为演奏者或乐器的房间中的收听者创建三维立体声感觉。 这种效果通常使用称为“伪人头录音”的技术来创建,其中在人体模型头部每个耳朵中配备有麦克风。“(维基百科,”双耳录音“)

在游戏中,3D音频应该用实时处理的方法来创建,因为我们没有办法预期声音对象的硬广在某个位置,来匹配玩家位置和头部移动。因此在其被发明一个世纪后,现在双耳录音正在被重新使用,且工程师和投资者都正在努力开发适合于VR的最近双耳算法

而实际上,由于需使用的立体声耳机而不是扬声器来复制3D定位(在VR中将玩家与外部世界隔离是必要的,并且对于视野范围,需要可以匹配相对于头/耳运动的音频回放)的这个特性 ,专业人员逻辑上愿意选择双耳作为3D音频处理的新标准,而不是通常的环绕技术(仅限于水平和距离音频定位)。

总结

在我们使用VR时,有许多音频事情需要挑战、考虑,且需求正在增长。通过进一步的探索,我们将会推动VR和游戏产业的边际。虽然游戏行业一直在提高最新一代优先级的画面质量,伴随这VR的迅速崛起,VR行业迅速的集中到来音频领域,因为VR社区意识到,更好的音频实现会大大增加玩家的享受和参与感,提高沉浸状态,最终提高存在感。

360度的音频定位只是VR开发带来的音频改进的一个直接结果。音频的处理工具也随着VR需求发展也不断发展,新技术及其在混合领域用于VR技术需求方面,以增强VR体验。

音频是行业探索和聚焦的下一个新媒介,VR肯定会让音频成为焦点!

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频
    +关注

    关注

    29

    文章

    2766

    浏览量

    80779
  • vr
    vr
    +关注

    关注

    34

    文章

    9619

    浏览量

    149409

原文标题:VR中为什么需要把游戏音频放在聚光灯里?

文章出处:【微信号:Imgtec,微信公众号:Imagination Tech】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    如何优化PAR38 LED聚光灯并且提高工作效率

    照明设计师可以通过选择合适的LED驱动器和LED来实现低成本,高效率,可调光的PAR38定向聚光灯。 LED应该提供高流明输出,出色的光学控制和色彩一致性,而LED驱动器提供紧凑的尺寸,低散热要求和出色的调光性。
    的头像 发表于 01-25 08:17 5729次阅读

    【每日一贴日志】亲爱的,知道吗

    家务的女孩,我不喜欢做饭。亲爱的,知道吗?本来是没什么的,可是认识以后,我感觉我是世界上最笨的女孩。亲爱的,知道吗?我害怕,是因为我会
    发表于 09-29 15:18

    RFID应用的7类技术问题知道吗

    RFID应用参考架构是由哪些部分组成的?RFID应用的7类技术问题知道吗
    发表于 05-25 06:32

    DIY设计智能RGB/RGBCW聚光灯

    描述智能 RGB/RGBCW 聚光灯 - PROXIMA ALPHA它是什么?紧凑的设计使 Proxima Alpha 成为便携式 LED 聚光灯有 40 个 RGB LED、一个
    发表于 08-22 06:31

    科锐推出新型LED聚光灯 和白炽相比节能87%

    科锐(CREE)公司推出一种新型4英寸CR4 LED聚光灯和更高光强度的6英寸聚光灯。无止境的创新公司能够突破LED应用的成本障碍,同时在性能、颜色品质和方便性上超出行业最高标准。新的
    发表于 07-25 09:49 1152次阅读

    汽车后视镜的科学,知道吗

    汽车后视镜的科学,知道吗?,感兴趣的小伙伴们可以看看我的上传的资源,有分享更多。
    发表于 08-12 15:13 53次下载

    无线充电IC知道吗

    无线充电IC知道吗
    发表于 01-22 19:37 47次下载

    如何参考设计可以优化的效率的LED聚光灯

    照明设计师可以实现低成本、高效率、可调方向的聚光灯下通过选择合适的LED驱动器和LED的工作。LED应提供较高的流明输出,优异的光学控制和颜色的一致性,而LED驱动器提供了一个紧凑的尺寸,低散热的要求,和优秀的dimmability。
    发表于 06-12 08:49 17次下载

    MIUI的这10个小设置知道吗

    其实在MIUI,藏着很多个性化的选择,接下来的这10个小设置,知道吗
    的头像 发表于 05-08 16:53 4206次阅读

    关于VR是什么知道吗

    在如今的信息发达的社会中出现了很多的新名词,比如我们今天所说的VR,那到现在为止有的人还不知道什么是VR吧!
    发表于 06-24 10:09 6058次阅读

    《半条命VR(Half-Life: Alyx)》预告片上线 VR推到了聚光灯

    近日,《半条命VR(Half-Life: Alyx)》的公告和预告片VR推到了主流游戏聚光灯下,目前在YouTube和Twitter上,
    发表于 11-28 10:21 917次阅读

    聚光灯下的电源管理

    聚光灯下的电源管理
    发表于 05-26 12:38 9次下载
    <b class='flag-5'>聚光灯</b>下的电源管理

    智能RGB/RGBCW聚光灯开源分享

    电子发烧友网站提供《智能RGB/RGBCW聚光灯开源分享.zip》资料免费下载
    发表于 07-29 09:28 3次下载
    智能RGB/RGBCW<b class='flag-5'>聚光灯</b>开源分享

    通过DMX使用Arduino控制LED聚光灯设置

    电子发烧友网站提供《通过DMX使用Arduino控制LED聚光灯设置.zip》资料免费下载
    发表于 10-26 11:21 1次下载
    通过DMX使用Arduino控制LED<b class='flag-5'>聚光灯</b>设置

    聚光灯之外”的激光雷达公司的活法

    这段时间,笔者接触了不少部分激光雷达公司的专家、主机厂与自动驾驶解决方案商负责激光雷达选型方面的专家,与他们探讨了“聚光灯之外”的激光雷达公司面临的挑战与机遇,以及未来的生存模式。
    的头像 发表于 04-26 10:02 702次阅读
    “<b class='flag-5'>聚光灯</b>之外”的激光雷达公司的活法