央视录音师技术分享:VR音频到底是什么?
文章出处:深圳市鼎盛灯光音响技术有限公司 发表时间:2017-06-30

还记得18年前那部颠覆了所有人想象的电影——《骇客帝国》么?当基努·里维斯插上管子进入母体的时候,其实他就是进入了一种VR情境!只不过电影里的版本可能是10000.0,我们现在还只是1.0,什么?1.0就不算未来已来?咳咳,我会告诉你我是个标题党么?!

言归正传,说回VR。也许你不知道VR是什么,但是你一定听说过VR,因为现在VR实在太火了,有多火呢?


詹姆斯去年拍摄了一部12分钟的VR宣传片


谢耳朵在《生活大爆炸》里玩VR


比尔盖茨和巴菲特上演的VR首富版《速度与激情》


看见没?VR已经火到了汪星球

Oculus的创始人帕尔默曾说:“像《骇客帝国》一样的VR体验也许永远都不会实现,但我们能做到的就是改进我们现有的:音效、触觉和视觉的构建,在未来能够真实地复制更多体验。” 我们今天就来聊一聊怎么改进音效。

当我第一次接到制作VR音频的任务时,是一脸懵X的——VR是什么?好在有度娘!

——摘自百度百科


看完以后更懵了

VR音频到底是什么?

经过半年的摸索,我总结了一个不是很全面的说法:VR就是能提供全方位无死角的视听模式的一种技术。

好了,该说我们的重点了——VR音频。

在着手制作前,我们一定会想到一个问题:VR需要一个什么样的声场呢?

要弄清这个问题,我们先来回顾音频技术的发展轨迹:从单声道、立体声、5.1、7.1一直到22.2,我们一直在靠增加音箱数量来将声场还原得更逼真。但是还原这些声场都有一个共性或者说一个前提,那就是声场的方向永远是不变的——我们明确定义了声场的前后左右,才能开始着手构建声场。

环绕声模式下的固定声场

但是VR来了,这个方向不变的前提被瞬间打破了,观众带上VR眼镜只要转转脑袋,前后左右就被重新定义了,这时候我们还原声场的要求也被提到了一个新高度——我们需要让声场动起来,而且还是跟着观众的头部来动。这个跟随头部转动的声场就是VR音频要还原的声场。

那么,对于VR来说,什么是最重要的呢?在回答这个问题前先来回答另外一个问题:你为什么喜欢在电影院里看电影而不是在家中?答案往往就简单的三个字:沉浸感。个人认为在VR技术还不很成熟的今天,VR的一切技术手段都应以增强沉浸感为目的。也许有一天,随着沉浸感的无限增强,增强到如《骇客帝国》中一样,你就分不清虚拟和现实了。

明确了制作方向,剩下的就是如何实施了,怎样增强沉浸感呢?

我们先来看看用传统音频的制作方式会怎样。假设我正在用VR眼镜看一场晚会,在观众席中有一台VR机位,我一定会时不时地环顾四周,感觉就像自己置身其中。但是如果使用传统音频技术,伴随着头部的转动,我听到的声音却是一成不变的,甚至连身边人的声音都听不到,真实感和临场感就会大打折扣。

如果我们使用VR音频技术呢?由于有了头部跟踪技术以及三维声技术,我们可以仅仅通过普通的立体声耳机就得到一个逼真的VR声场,这个声场与传统声场最大的不同就在于,“通过声音寻找画面”。什么意思?还用刚才的例子:我用VR眼镜看晚会,机位就设置在观众席中,我通过耳机听见后排有个观众在大声叫好,我想看看他长什么样子,于是我转过身去看。这个过程就是“通过声音寻找画面”。

这种“通过声音寻找画面”的方式,在现实生活中是不是频繁发生?我走在单位的楼道里,听到身后有人叫我,我回身看是谁;我走在大街上,头顶有飞机飞过,我抬头看飞机在哪儿……在现实生活中越常发生、与现实生活越接近,这样的体验就越有沉浸感。

VR音频的未来

引申一下,我还想说说一些自己开的脑洞——VR音频的未来

当观众带上VR眼镜转动头部的时候,其实就是把镜头的移动权交给了观众。可以想象在不远的将来,家用带宽足够的情况下,我们将能够实现每一个VR摄像机对应一路推流,用户在自己的终端上可以自由切换镜头,将镜头的切换权也交给观众。想看什么就看什么,这才是上帝该有的待遇!

在我刚成为一名“电视民工”没多久,就听到一句话:“audio follow video”(音频遵从视频),这让我深深地感受到了“歧视”,凭啥我就要follow你!现在VR来了,扬眉吐气的日子到了。来,跟着我开的这个脑洞进来扬眉吐气一下。想象一下,在未来我们拍了一部VR版的《人民的名义》,由于VR的视角是完全自由的,祁同伟和育良书记正在飙演技的时候你却一直盯着高小琴看,导致漏掉了很多推进剧情发展的关键画面。这个时候也许就需要“video follow audio”了,通过声音来引导观众去看不容错过的那些关键画面。

“若干年后,你戴上VR眼镜,看到已经逝去的亲人与你一起围坐在餐桌前其乐融融——吃着老的饭,聊着老的天,他们似乎并未走远。摘下眼镜,你才发现,眼角有两行泪水潸然而下。”

过去未去,未来已来。


(手绘题图:@曾明)

作者介绍:曹徐洋

中央电视台音频部录音师,毕业于中国传媒大学电子工程专业

参与《2014索契冬奥会》CCTV前方IBC音频系统的设计、搭建及直播工作

参与制作《60周年国庆阅兵》

参与制作《天宫一号及神舟八号发射的直播报道》

参与《2017CBA全明星赛VR直播》音频系统的设计、搭建及直播工作

参与《2017年春晚VR直播》音频系统的设计、搭建及直播工作

参与《2017年体坛风云人物颁奖VR直播》音频系统的设计、搭建及直播工作

参与《2017年无锡亚洲乒乓球锦标赛VR直播》音频系统的设计、搭建及直播工作

咨询热线:
13823243674
咨询热线:
13510893069
在线客服:
业务咨询
业务咨询
官方微信公众号:
公司官网: http://www.dshyy.cn/ http://www.szdsdg.com/
公司地址: 深圳市坂田上雪科技工业城东区8号E栋1楼3号