曹煊博士系腾讯优图实验室高级研究员。优图—腾讯旗下顶级的机器学习研发团队,专注于图像处理、模式识
导语:magicleapone的六层光波导究竟长什么样子?
雷锋网(公众号:雷锋网)按:magicleapone的混合现实技术过去几年一直吊着大家的胃口,当它出现在工作室的拆解台上时,我们大家都有种穿越的感觉。鉴于这家神乎其神的公司已经融资23亿美元,我们真心希望它们在产品里加了魔法粉,因此ifixit“狠心”对其进行了拆解。雷锋网编译了全文,让我们一起来看看magicleapone到底有什么黑科技吧。在拆解这款万众期待的产品之前,我们还是不得不罗嗦下参数:
magicleapone用上了英伟达tegrax2(parker)soc,辅佐它的064位核心和4个armcortexa5764位核心。gpu方面则采用了基于pascal的集成gpu,它配备了256个cuda核心。
在存储上,magicleapone则采用了8gb+128gb的组合。接口除了usb-c,还支5毫米耳机接口。网络方面不但11ac/b/g2。
其实这款英伟达soc原本是为车载应用设计的,它已经在特斯拉等厂商的自动驾驶和adas系统中占据了重要地位。看起来,magicleap好像错选了产品,不过拆开了才发现,这种为了绘图和理解环境采用的多层外部传感器设计与自动驾驶汽车是异曲同工。
第二步不看广告看疗效,在将magic拆成“碎片”之前,我们先体验了一下,看看这款声名在外的产品能否提供宣传中所谓超凡脱俗的体验。
可靠的红外摄像头这次可立了大功,鼻梁上方频闪的红外投影仪能提供深度感应,其原理与iphonex的faceid和kinect类似。
如果你凑近看,还能在每个镜片上额外发现4个红外led,它会“秘密”点亮你的眼球,方便进行追踪(随后我们会详细分析追踪器)。在正式开始前,我们得再罗嗦点专业内容:
内容创作得从lightpack说起,它能提供电力并控制数据处理,除此之外还能发送图像和声音数据给头戴设备(lightwear)。
与此同时,lightwear能追踪手柄的位置和朝向,并对你的周边环境进行绘图以插入虚拟元素。
至于这些虚拟元素如何生成,这属于另一个讨论范畴了。
第四步玩转“混合现实”可不容易,毕竟想在屏幕上搞增强现实是一回事(比如智能手机和带外置摄像头的vr屏幕),但想在实际的,未经过滤的现实“画布”上可要难得多。为了要展现自己的魔术,magicleapone用到了两个巧妙的技术:
波导显示器——其实它本质上是个透明屏幕,波导(magicleap称其为“光子光场芯片”)会引导光(这里可理解为图像)通过一层薄薄的玻璃,随后放大并映入用户的眼睛中。
焦平面——在vr显示器上,所有事物都是对上焦的。不过在现实中眼睛看到的世界可不是这样,“背景虚化”我们的眼睛也能玩出来。为了模拟这种效果,magicleap叠加了多个波导来创造焦平面,将图像切割成清晰和模糊的区域。这一部分,我们还是一同挖挖隐藏在里面的光学宝藏吧。快速测试里我们取下了偏光镜片,为的是深入挖掘,看能不能有什么新发现。
说实话,这副眼镜里面的设计毫无美感,除了突出的红外线led,还有布满条纹的波导“显示”区域,以及一些奇怪的胶水。
波导区域由6个不那么漂亮的薄膜层压成,每层之间都有小的气隙。
其边缘区域看起来像是手喷的黑色,这样处理应该是为了最大限度地减少内部反射和干扰。
在固定用的头带内,我们则发现了一级激光标签。在眼睛上玩激光?是不是觉得有些吓人?别担心,正常使用中它非常安全,甚至比你的cd机都安全。_。