它是38台5K摄像机+超级计算机的科技美学,犹如当年《黑客帝国》灵魂附体

VR直播的出现让观众第一次体验到了“身临其境”的感受。

然而观看VR直播的局限性也是显而易见的,比如:

  • 观众必须带上眼镜,与世隔绝(成为外人眼里的傻X);
  • 频繁扭头,不仅累而且晕(能坚持看5分钟的人都是神);
  • 离直播主体太远(通常在观众席,还不是VIP的那种);
  • 观看角度单一,不能多角度观看(会错过不少精彩的镜头);
这是目前大多数VR直播的真实效果,你能坚持看几分钟?

结论:新鲜感一过,VR直播还不如电视直播。

那么有没有比VR直播更具观赏性的技术呢?

Gordon无意中发现了FreeD技术。

一看这视觉效果我就震惊了,这不是好莱坞电影里才有的特效镜头吗?俗称“子弹时间”。
(连这个都知道)

那这是怎么做到的呢?

这要追溯到1999年的好莱坞电影《骇客帝国》,其中男主角Neo(基努·里维斯饰演)仰身躲子弹的慢动作——“子弹时间”也因此而得名,并一举成名,成为后来影视行业的常见特效之一。

而创造这组经典镜头的人正是该片的编剧+导演,天才(呃~不对,应该是怪才)沃卓斯基兄弟。

(是的,一看就知道是两个逗逼。)

弟弟安迪·沃卓斯基和哥哥拉里·沃卓斯基均出生于同一个波兰裔美国家庭(难怪叫什么撕基),母亲是护士,父亲是商人。

两人从小就酷爱艺术和科幻题材的作品,当过木匠、油漆工,也在漫画公司画过画(总之就是没有正经上过学的那种)。


他们经常就一些神话理念提出自己的独到见解,并试图拍摄一部概念性很强的动作电影。直到1996年兄弟俩自编自导的《黑客帝国》上映而变得一炮而红。

之后哥哥拉里接受变性手术,并改名为拉娜·沃卓斯基。

图左为哥哥,呃~不对,2013年后变成姐姐啦。

随后,2016年弟弟安迪也宣布变性,同时更名为莉莉·沃卓斯基(下图),沃卓斯基兄弟从此变为沃卓斯基姐妹。

我查找过他/她们的照片,竟然没有一张不是逗逼的。

聊到这里,怎么有种聊不下去的感觉…

算了,我们还是聊聊正经的,看看【子弹时间】是怎么拍摄的。

以《黑客帝国》中Neo在楼顶上躲避子弹那一片断为例,沃卓斯基兄弟(至少那个时候还是兄弟)找来了120台同种类型的相机,将它们以Neo为中心呈圆形放置。同时,机位由高到低。

在拍摄过程中,120台相机并非同时拍摄,而是两部相邻的相机每隔1/120秒拍摄一个镜头。

众所周知,电影是每秒24格(帧),而这120台相机在1秒内拍摄到的120张相邻角度的图片,被合成到5秒镜头里,就形成了Bullet Time(子弹时间)的效果。

对,就是这么简单,可是为什么你怎么想不到呢?
(因为你不是天才,没有变…那啥)

那FreeD技术也是类似的方式实现的咯?

应该说原理相似,但是技术要先进太多。

首先,要实现FreeD的180-360度的自由视角,必须在赛场周围架设12台以上的4K高清摄像机。以转播巴塞罗那场比赛为例,赛场周围共架设38台5K画质的专业摄像机。

随后,系统将38台摄像机采集到的影像进行分析,得出整个场景中所有物体的空间深度,并且构建成场景的3D点阵,然后再按照设定的虚拟摄像机路径进行回放。

那么FreeD和传统“子弹时间”有什么区别呢?

 

表面上看,他们呈现出的最终结果是相似的。其实不然,你仔细反复观察就会发现,“子弹时间”只能实现某一个瞬间的360度视角移动(因为它是通过拍照实现的,不可连续),而且视角受到相机机位的限制,无法自由移动。而FreeD可以做到赛场内任意时刻的360度回看,并且可以超出相机机位的限制(比如能获得在空中俯瞰的视角),自由程度相当高。

FreeD监控室画面

或许你会感觉,FreeD就是加强版的“子弹时间”。

这么理解似乎也没错,但是Gordon想强调的是:“子弹时间”其实只是视频拍摄和回放的一种特殊效果,属于二维效果;而FreeD是通过对现场所有物体(包括移动中的物体)建模计算而实现的,属于三维技术。

现场38台5K高清摄像机捕捉的图像单独来看都是二维,但是计算机却能将它们采集到的像素数据(注意是以像素为单位的处理)按照预先调试好的规律(摄像机间隔),分配到X-Y-Z坐标中,进行重建,并生成新的三维图像。

可以想象,38台5K摄像机每秒将产生多么惊人的数据量,而这些数据都会被存储到FreeD数据库中,然后依据操控者(导播)的要求,重新产生(计算)任何想要的视角。

FreeD技术非常酷炫,但是对于摄像机的像素,以及后台计算机的要求非常高。
早期的FreeD要实现360度自由回放,需要至少等待5分钟以后,因此无法适用于直播场合,只能是录播。后来随着Intel公司的加入(除了资金,还无偿提供了设备和技术支持),计算性能有了质的提升,等待时间缩短到只要几秒。不过,依然需要一个机房的服务器阵列来满足需要,看上去就像是一台超级计算机。

FreeD的计算机房

如此牛逼的技术是谁发明的呢?

 

竟然又是一家以色列公司(咦~我怎么说又),叫Replay科技公司。成立于2011年,总部位于特拉维夫,目前拥有约100多名员工。

Replay公司开发了多项多维视频影像技术,其最牛逼的便是Free Dimensional Video(简称FreeD),另外还有一些虚拟现实(VR)和增强现实(AR)技术。

2013年Intel宣布以1.75亿美金收购Replay公司。很快,这家公司便开始在美国市场大展宏图,先后登上MLB职棒大联盟、NBA篮球、超级碗(橄榄球)等赛场,不久前又在西甲豪门巴塞罗那队主场——诺坎普球场的比赛直播中出现。

好了,看完如此牛逼的技术是不是该给笔者点个赞呢?(逻辑障碍症又犯了)

关注【零镜网】,让你三分钟读懂一个新科技。