热门标签 | HotTags
当前位置:  开发笔记 > 前端 > 正文

听你所想——音效如何影响虚拟现实体验

据国外媒体报道,中央录音棚工作室的音效制作大师艾弗·泰勒(IvorTaylor)日前撰文阐述了虚拟现实音效的问题,并从人类大脑生理构造的角度解释了要想获得更好的音效

据国外媒体报道,中央录音棚工作室的音效制作大师艾弗·泰勒(Ivor Taylor)日前撰文阐述了虚拟现实音效的问题,并从人类大脑生理构造的角度解释了要想获得更好的音效和更好的虚拟现实体验,就必须将3D视频和音效有效结合。同时3D音效也只有与视觉相结合才能够完美呈现。现将原文编译如下:

作为一个充满激情的音效制作者,在谈及音效发展时,不得不说虚拟现实对音效产生了非常积极的影响,有越来越多的人开始关注音效。而在之前,我经常听到音效制作者自己都说:“音效毫无新意可言”。

但是,现在,不管你相信与否,随着3D音效以及人头录音技术的发展,音频产业正在成为充满创意的产业。

在一定程度上,音频产业的新机会已经炙手可热,不可避免地被到处使用。人们往往喜欢人头录音的效果,也希望得到这种效果,但他们根本不清楚这种音效的原理。例如现在汽车的静音效果非常好,曾经有一位客户要求制作汽车内部的3D音效,可是即便通过这种音效就真正能发现汽车的问题所在吗?

由于直接进入人耳,因此人头录音能够精确复制原始音频。最好的人头录音能够为用户带来惊人的沉浸感。但是没有相应的视觉刺激,人们就只能感知人头录音的脑后效果,也就是不存在清晰可辨的正面声常

那么这种音效制作的新技术对于虚拟现实来说到底意味着什么?我将从人脑的构造来详细解释这个技术问题。

人类的进化是大自然优胜劣汰的结果,而我们的眼睛和耳朵的进化也是自然选择的结果。在过去,当我们想到看电影的场景时,在我们头脑中就会出现一个人坐在礼堂里,面前是播放的电影画面。现在我们也可以想象一个体验虚拟现实的人,他在天文馆里四处走动,通过3D视觉和音效体验宇宙奇观。可悲的是,这两个例子对于解释音效技术来说都是无稽之谈。

在这个星球上,现存的每个人都是达尔文生物进化论自然选择的结果。我们的大脑以及相应的听觉和视觉,都已经为生存的目的进行了优化。想象一下,1000年前的一个人进入时间机器,被传送到2016年伦敦的特拉法加广常起初他会非常害怕,因为其获得的视觉和听觉都是前所未有的。他的大脑需要通过一段时间适应外界刺激。随着他们对现实的不断认知,他们发现自己会很快适应,因为大脑是一种具有自适应功能的机器。

在谈及3D音效时,人们往往忽略了它是虚拟现实整体系统一部分的事实。如果你能了解我们的大脑是如何工作的,你就会对此有深入理解。人类的视觉和声音是两个独立的感觉系统,两种感知会有次序地集中在人脑中加以处理完善。

自原始社会以来,人们生存面临的一个问题是,你不可能总能看到可以听到的东西。视觉是你需要去看的,但听觉却无处不在。我们经常会听到这样一个经典的骇人故事——“就在你身后!”

每一秒我们都在处理来自人耳的信息。我们的大脑得到这些信息,并判断声源是在我们的面前还是身后。如果我们同时得到视觉确认,譬如站在我们面前的人正在张嘴说话,那么大脑告诉我们的声音来自于面前。这并不是纯粹的视觉想象。人耳获得的声音被传送给人脑,人脑会潜意识地认为:“什么是我最好的猜测?如果我做一个坏的猜测可能会导致严重的错误后果。”人脑中往往以这种高风险的决策过程对所获取的视觉和听觉信息进行处理,其将听觉和视觉所提示的位置和方向进行整合,并通过概率和以前的经验作出最终的决策。

这样一来,单纯的3D音效就会出现问题。三维声场是真实存在的,但是我们的大脑会采用上述的“最好的猜测”进行分析处理。我们的大脑的确能感知3D音效的距离和高度,但却不能确定声音来自于面前或是脑后。如果面前没有相应的视觉刺激,大脑总会让我们感知声音是从脑后传来的。

那么这些诸如人耳录音、立体混响以及波场技术在虚拟现实中将如何发展?那么我的推测是,这些音效制作的新兴技术将逐步融入现有的“立体声”音效,与虚拟现实中的视觉信息相结合,为人们带来身临其境的全方位音效体验。

也许,就像我的父亲一样,起初只听单声道的声音,但最终学会了如何欣赏立体声。今后我们或许将继续训练我们的大脑,以适应一个完全不同的声音传送方式。如果这成为现实,这些音效制作的新技术将会有更大的影响力。

音频产业也将再度繁荣。(宁宇)

via:vrfocus



推荐阅读
  • Google最新推出的嵌入AI技术的便携式相机Clips现已上架,旨在通过人工智能技术自动捕捉用户生活中值得纪念的时刻,帮助人们减少照片数量过多的问题。 ... [详细]
  • 在使用 DataGridView 时,如果在当前单元格中输入内容但光标未移开,点击保存按钮后,输入的内容可能无法保存。只有当光标离开单元格后,才能成功保存数据。本文将探讨如何通过调用 DataGridView 的内置方法解决此问题。 ... [详细]
  • 在维护公司项目时,发现按下手机的某个物理按键后会激活相应的服务,并在屏幕上模拟点击特定坐标点。本文详细介绍了如何使用ADB Shell Input命令来模拟各种输入事件,包括滑动、按键和点击等。 ... [详细]
  • 根据最新发布的《互联网人才趋势报告》,尽管大量IT从业者已转向Python开发,但随着人工智能和大数据领域的迅猛发展,仍存在巨大的人才缺口。本文将详细介绍如何使用Python编写一个简单的爬虫程序,并提供完整的代码示例。 ... [详细]
  • 本文深入探讨了C++对象模型中的一些细节问题,特别是虚拟继承和析构函数的处理。通过具体代码示例和详细分析,揭示了书中某些观点的不足之处,并提供了更合理的解释。 ... [详细]
  • 本文详细介绍了MicroATX(也称Mini ATX)和MATX主板规格,探讨了它们的结构特点、应用场景及对电脑系统成本和性能的影响。同时,文章还涵盖了相关操作系统的实用技巧,如蓝牙设备图标删除、磁盘管理等。 ... [详细]
  • Codeforces Round #566 (Div. 2) A~F个人题解
    Dashboard-CodeforcesRound#566(Div.2)-CodeforcesA.FillingShapes题意:给你一个的表格,你 ... [详细]
  • 在过去两周中,我们利用 ReportViewer 开发了与生产良率相关的报表,其中每个制程的直通率是所有测试项良率的乘积。由于 ReportViewer 没有内置的累乘函数,因此需要借助自定义代码来实现这一功能。本文将详细介绍实现步骤和相关代码。 ... [详细]
  • ###问题删除目录时遇到错误提示:rm:cannotremoveusrlocaltmp’:Directorynotempty即使用rm-rf,还是会出现 ... [详细]
  • 本文详细介绍了Linux系统中init进程的作用及其启动过程,解释了运行级别的概念,并提供了调整服务启动顺序的具体步骤和实例。通过了解这些内容,用户可以更好地管理系统的启动流程和服务配置。 ... [详细]
  • 本文旨在探讨《人月神话》中关于软件开发任务的理解,分析其核心概念和实际应用。书中指出,软件开发的主要目标是构建由抽象实体构成的复杂概念体系,而次要目标则是在时间和空间限制内将其转化为机器语言。 ... [详细]
  • 本文总结了Java程序设计第一周的学习内容,涵盖语言基础、编译解释过程及基本数据类型等核心知识点。 ... [详细]
  • 本文介绍如何使用Perl编写一个简单的爬虫,从丁香园网站获取意大利的新冠病毒感染情况。通过LWP::UserAgent模块模拟浏览器访问并解析网页内容,最终提取所需数据。 ... [详细]
  • TechStride 网站
    TechStride 成立于2014年初,致力于互联网前沿技术、产品创意及创业内容的聚合、搜索、学习与展示。我们旨在为互联网从业者提供更高效的新技术搜索、学习、分享和产品推广平台。 ... [详细]
  • 作为一名 Ember.js 新手,了解如何在路由和模型中正确加载 JSON 数据是至关重要的。本文将探讨两者之间的差异,并提供实用的建议。 ... [详细]
author-avatar
疯狂一夏531
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有