陈根:虚拟现实引入全息技术,破解视觉疲劳困局

文/陈根

在一众三维技术里,虚拟现实备受市场关注——虚拟现实技术(VR)作为一种能够使人以沉浸的方式进入和体验人为创造的虚拟世界的计算机仿真技术,是三维场景可视化的重要代表。
然而,尽管经过多年宣传,VR头戴式耳机至今也仍未成为电视或计算机屏幕上观看视频的必备设备。一个重要的原因是VR依然会让用户感到不适。虽然用户实际上是注视着2D显示器,但VR会产生3D观看的错觉,从而使人视觉疲劳和感到头晕恶心
在这样的背景下,全息图对应而出。全息图是以激光为光源,用全景照相机将被摄体记录在高分辨率的全息胶片上构成的图。与传统的照片相比,传统的照片呈现的是真实的物理图像,而全息图则包含了被记录物体的尺寸、形状、亮度和对比度等信息。这些信息储存在一个很微小但却很复杂的干涉模式中
长期以来,研究者们一直在试图制造出计算机生成的全息图,但传统上,该过程需要一台超级计算机来进行物理模拟,这不仅非常耗时,而且产生的效果真实感不高。
近日,来自麻省理工学院的研究者已经开发出一种几乎可以立即生成全息图的研究方法。研究人员表示,基于深度学习的方法非常高效,使得新方法瞬间就能够在笔记本电脑上运行。
具体来说,新方法能够实时从单个RGB深度图像合成光致彩色3D全息图。其中,研究人员的卷积神经网络(CNN)具有极高的内存效率(低于620千字节),在单个消费级图形处理单元上以60赫兹运行,分辨率为1920×1080像素。
利用低功耗的设备上人工智能加速芯片,研究人员的CNN还可以在移动(iPhone 11 Pro,1.1赫兹)和edge(Google edge TPU,2.0赫兹)设备上进行交互式运行,在未来的虚拟和增强中具有出色的实时性能现实移动头戴。
研究人员通过引入具有4000对RGB深度图像和相应3D全息图的大规模CGH数据集(MIT-CGH-4K)来启用该方法。研究人员表示,此次张量全息术的新方法或将推动 VR 和 3D 打印等领域引入全息技术。该研究的论文现已发表在《Nature》上,索尼对部分研究提供了支持。
(0)

相关推荐

  • VR技术酷炫舞台制造机

    多媒体艺术的飞速发展,为我们带来了许多视觉惊喜,各类数字技术在舞台艺术上更是大展身手,在过去不久的春晚上AI技术.VR技术.裸眼3D等,为全国观众展示了强烈的视觉体验,丰富舞台演出的同时,也展现了科技 ...

  • 玩转3D全息图像!AI即刻生成

    AR/VR技术的起源,可以追溯到上世纪五.六十年代.哲学家.电影制作人和发明家Morton Heilig利用在电影上的拍摄经验设计出了一款名叫Sensorama Stimulator的机器. 作者 | ...

  • MIT推出3D全息图生成新方法,可在智能手机上实时运行

    编辑:小舟.陈萍 来自 MIT 的研究者利用深度学习推出了 3D 全息图生成新方法,可以为VR.3D 打印.医学成像等创建全息图,并且能够在智能手机上运行. 提起三维场景可视化,虚拟现实(VR)是最常 ...

  • 不到1MB内存,手机秒生成高分辨率全息图!MIT研究登上Nature

    如今,利用人工智能技术,科学家可以在智能手机上快速生成逼真的彩色3D全息图了. 从本质上说,全息图类似于从2D窗口寻找到一个3D场景的图像,每个全息图的像素都会散射掉落在其上的光波,从而使这些波以产生 ...

  • 陈根:微美全息,获得全息AR新专利

    文/陈根 全息技术,是一种利用干涉和衍射原理来记录并再现物体真实的三维图像技术."全息"即"全部信息",就是用投影的方法记录并再现被拍物体发出的光的全部信息.沉 ...

  • 陈根:3D打印技术,如何帮助矫正牙齿?

    文/陈根 近些年,牙齿美学和重视齿科健康的观念逐步深入人心,越来越多的人开始接触牙齿矫正,其中,最为直观的变化是正畸矫治器的发展.过去,金属牙套是最常见的矫治器,一咧嘴,就能看到满嘴的"钢牙 ...

  • 陈根:3D打印技术,打造微型机器人

    文|陈根 微型机器人是21世纪医用机器人领域的尖端技术之一.其以微传感器与微执行器作为主要研究对象,在微电子技术的基础上发展起来.微型机器人应用于临床医学的诊疗,不仅提高了诊断的可靠性.真实性,而且由 ...

  • 陈根:芯片再突破,IBM首发2nm芯片技术

    文/陈根 芯片是市场的灵魂,也是信息产业的三要素之一,芯片起则科技起,科技兴则国家兴. 简单来说,芯片就是采用几百道复杂的工艺,把一个电路中所需的晶体管,包括二极管.电阻.电容和电感等元器件及布线互联 ...

  • 陈根:苹果开发新专利,无袖带血压监测技术

    文/陈根 血压是反映心血管功能的重要生理指标,在疾病诊断.治疗观察和预后判断等方面有着重要意义.临床上最常见的测量血压方式是采用袖带式的血压计,其至今已经延用了100多年,被称为血压测量的" ...

  • 陈根:量子空穴,或将破解量子比特运行密码

    文/陈根 量子比特(Qubit)是量子计算机系统中最小的数据存储单位,类似于经典计算过程中的比特. 目前,较为流行的量子比特类型是超导材料上的量子比特,或单原子上的量子比特.与此同时,量子技术也已在多 ...

  • 陈根:3D“微型脑”,为医疗提供更多技术可能

    文/陈根 人脑类器官非常柔软,其杨氏模量约在1到2 kPa之间(皮肤大概是200kPa),由于相关技术的限制,目前与人脑类器官形状匹配且具备柔性力学性能的高性能电子器件非常少. 虽然之前出现过一些与3 ...

  • 陈根:可穿戴脑磁图,为医疗提供更多技术可能

    文/陈根 近年来,人工智能(AI)医学成像被越来越多地应用于医疗领域,因为其不仅可以提高疾病表征的检出率,还能精准确认病灶的结构信息. 脑磁图(MEG)是脑功能成像的一种方法,可用来测量流经神经元群的 ...

  • 陈根:把百科全书写在针头上——纳米技术使能生产未来

    文/陈根 1959年12月,物理学家理查德·费曼以"在微小等级操纵和控制事物的问题"为主题发表了名为"底部充足的空间"的演讲.在那次的演讲中,费曼不满足于在针头 ...