谷歌造了块神秘的黑玻璃!相隔万里面对面聊天,身临其境太炫酷

作者|HENG

来源|极果编辑部

说到3D电影,大家肯定不陌生了!一个子弹突然飞过来,估计不少人都会下意识地躲开… 确实,那种身临其境的感觉太逼真了!#数码科技要闻#

开个脑洞,如果把这种3D效果用在视频通话上呢?也就是 —— 3D视频通话;这样,家人和朋友不在身边时,不但能通过屏幕看到对方,更像是坐在面前一样聊天。

事实上,这一幕看似很科幻很未来,但已经被谷歌做出来了。前几天,谷歌于Google I/O大会上正式发布了一项黑科技计划 —— Project Starline,这项计划已经研发5年时间,研究的就是3D视频通话。

使用者就像看3D电影一样和对方聊天,而两人似乎真的坐在了一起,十分逼真。不过,背后的原理是什么?我们什么时候能用上?极果君今天就来聊聊它。

与普通视频通话一样,谷歌Starline的3D视频通话也是在屏幕前进行的,但其完整形态是类似化妆台的“格子间”,使用者需要坐在专门的座位上才能开始3D视频通话。

可以看到,屏幕中不再是二维画面,而是与真人1:1的三维立体显示,对方每一个动作、身上的细节,甚至阴影都能“真实”展现,就像真的坐在眼前一样。如果是第一次,恐怕都会忘了中间还隔着一块屏幕,而伸手去触摸吧!

看似炫酷,但原理很好理解。简单一点,可以根据3D电影的逻辑去理解,即拍摄、后期处理、播放三个环节。

首先,一般的摄像头肯定不行,必须能拍出立体影像,而且拍摄角度也不能单一。谷歌的介绍是,Starline使用了十多个高分辨率摄像机和定制深度传感器,从多个角度捕捉使用者的外形和外观,形成3D模型;其实就是模拟人眼去感知对方,在“脑中”形成立体画面。

这就是为啥需要使用者坐在特定的“格子间”里,其前后都布满了摄像头和传感器。

其次是处理。要知道,视频通话一开始,这么多摄像头和传感器同时工作、将捕捉的内容融合形成极其细致3D模型,每秒产生的数据可多达几千兆比特,当前的网络肯定传输不了,更别说还是实时的。

所以,为了可以通过现有的网络发送如此大尺寸的图像,谷歌开发了新的压缩和流媒体算法,使数据体量减少超过100倍。这样下来,一般的办公网络才可以流畅使用。

最后,就是将压缩的3D图像实时传输给对方,也就是“播放”环节。

但你应该注意到了,使用者并没有佩戴任何3D眼镜或头显等设备,因此,要让屏幕上的画面呈现出3D立体效果,还要用到裸眼3D技术。

其中玄机,就是使用者面前的那块65英寸的显示器 —— 光场显示器。同样,这块光场显示器也是谷歌特别研发,可以展现对方的真实面貌。

看到这里,不得不说很震撼。实际上,谷歌Starline这个项目已经研发超过5年时间了,可见3D视频通话看似简单,但背后的技术却极为复杂。

相比于谷歌Starline用到的十多个摄像头和传感器,估计大家更感兴趣的还是其3D显示技术吧,毕竟,裸眼3D显示的魅力几乎让人无法抵抗。

去年5月,韩国SMTown楼前的LED大屏上突然出现“巨浪”,网上引起不小关注,你肯定不陌生。

不过,这种“裸眼3D”显示方式比较讨巧,利用的是透视原理和人眼视差而形成的3D假象,需要在特定的角度(90°转角处)才能看出逼真的立体效果。

同样的原理,国内也有不少城市安排上了“裸眼3D”大屏,比如成都、重庆、西安等,吸引不少游客前往打卡。

此外,还有舞台上的全息3D显示技术,比如初音未来的演唱会,以及2013年周杰伦与邓丽君的同台对唱等等。

与这些户外大型3D显示不同,谷歌Starline用的却是看似很普通的显示器,那具体的差别是什么呢?

先回顾上文所说的,Starline通过不同角度的十多个摄像头和传感器,模拟人眼一样去感知聊天对象,然后融合、渲染成立体图像。

但要想这一立体图像“真实”地进入人眼,显示器也必须是“三维立体”的才行,特别之处在于,谷歌用的是「光场显示器」。复杂的原理就不多说了,只需要知道,利用光场技术,能让显示器模拟出真实环境下的发光方式,人眼再看到显示器里图像,就像真的一样了。

重复一遍!首先,摄像头和传感器模拟人眼去感知聊天对象,并形成“真实”的立体图像;然后,光场显示器再模拟真实环境将“聊天对象”呈现到使用者眼前,从此形成“面对面”的聊天效果。

实际上,无论是国内还是国外,光场显示技术的研究早就在进行了。比如,北京邮电大学的桑新柱教授就于2018年发布过“3D悬浮光场显示”的研究成果,除了裸眼3D显示,还能直接用手与图像“交流”。

虽然大家都在研究,但由于量产、成本等复杂因素,商用依旧很难。

同样,尽管谷歌表示Starline是一项长期研究,已经进行5年了,但真正的落地估计还得等一段时间。此前,有外媒去现场体验了一番发现,如果坐着的时候挪动位置太大,3D立体感会消失,所以还得等谷歌的进一步改善吧。

目前来看,谷歌Starline这套3D视频通话设备(姑且先叫它设备吧)应该造价不菲,而且不会面向普通消费者。

谷歌也说了,Starline正在与医疗机构、媒体等企业合作。的确,如果它能用在远程医疗上,肯定会是个不小的成就;和媒体领域的合作不言而喻,就是在远程办公场景了 —— 面对面开会。总之,无需佩戴任何设备就能看3D,这种感觉还是很爽的。

想象一下,未来手机、平板、电脑都是裸眼3D的话…… 其实,索尼去年10月就发布过一款裸眼3D光场显示器,售价4999.99美元。(想体验又财力雄厚的话可以试一试)

(0)

相关推荐