机器之能，是机器之心旗下关注全球人工智能产业应用场景及商业化的内容账 。 与互动：almosthuman2017
12 月 20 日，Magic Leap 发布了一款混合现实（MR，mixed-reality）头显设备，引起了很大轰动。Magic Leap 相信，这款产品会重新定义计算机世界与现实世界的关系。
Magic leap 推出的新产品名为 Lightwear。与那种像是戴在潜水员头上的、不透明的、面罩似的虚拟现实设备不同，Lightwear 的外型与护目镜有些相似，你的目光可以穿过 Lightwear，就好像戴着一副比较特殊的眼镜那样。
护目镜和一台袖珍但是功能强大的计算机（被称为 Lightpack）相连接，这台计算机可以将逼真的可交互的人物、机器人、太空飞船等任何事物呈现在佩戴者的眼前，与现实世界相融合。
Magic Leap 成立于 2011 年，自成立以来，Magic Leap 就是神秘的代名词。
一些媒体及出版界在过去很长一段时间内曾公开表示过对此状况的担忧，他们认为这一切可能是一场资本游戏。毕竟，这家没有实际产品的公司已经达到 60 亿美金的估值。
创始人 Rony Abovitz 是公司的灵魂人物。
他是一名生物工程师，在创立 Magic Leap 之前曾是医疗机械手臂公司 Mako Surgical 的联合创始人。
2013 年，Mako Surgical 以 16.5 亿美金的价格被美国第二大整形设备制造商史赛克公司收购，这笔钱为 Magic Leap 提供了前四年的初始资金支持。
距 Magic Leap 上一次公开发言已过去近一年的时间，当时它邀请了连线杂志到其位于南佛罗里达州的总部对其技术进行实地考察，但是连线杂志发表的文章中并未涉及硬件相关信息。
本月早些时候，Abovitz 邀请我去参观他们在佛罗里达州劳德代尔堡的公司总部，并撰写相关的科技文章，详细介绍其第一代消费类头戴式显示器的工作方式、外型以及使用感受。
文中我表明了一些观点，其中包括为什么像谷歌和阿里巴巴这样的巨头会对 Magic Leap 投入数亿美元，为什么一些研究人员认为这款产品可能会和互联 的诞生一样重要。
南加州大学创新技术研究所 MxR 实验室的创意负责人 David Nelson 表示，「这项技术正在将我们推向一种人机交互的新方式，这是现实的死亡。」
魔幻世界
我与 Magic Leap 技术的首次接触是在一个类似摄影棚的地方进行的。
这个类似摄影棚的地方位于一幢大楼内，这幢大楼与周围复杂的楼群呈隔离状态。这是公司为其技术体验做实验的地方，在这里进行实验的技术有朝一日将被用在主题公园或者其他面积较大的场所中。
在这里我体验了一个耗时大约一小时的项目。
根据保密协议，对于其中的所有 Demo，我只能描述我的感受以及思考，不能透露关于产品以及 IP 的任何细节。
事实上，这幢大楼中发生的很多事情将永远不会有被披露的一天。由于有保密协议，这幢大楼的建立就好像是只为了让参观者们亲眼见证「奇迹」真的存在，然后闭口不谈。
第一个超大型的演示让我进入了一个科幻世界。
这是一个完整的场景，隐藏在周围的强力风扇、巨大的扬声器以及一系列由计算机控制的彩色照明系统对这个场景进行了全方位的体验增强。
这是一次非常震撼的体验，为主题公园建造没有「围墙」或者无需等待的游乐设施提供了参考。
最重要的是，虚拟场景下所有的一切都发生在现实世界场地的布景中。现实世界的道具凌乱地分布在我周围的地面和墙壁上，显示效果虽然不能说与现实丝毫无差，但也很接近了。
看到这些被创造出来的东西像动画贴纸一样飘在我周围的现实世界中，却又不真实存在，说实话，我很震惊。
回到现实中，我又来到了这幢大楼中的一个面积很大的房间，这个房间被装饰成一个生活空间的样子，其中有沙发、桌子、小摆件以及地毯。
在演示区域，我尝试了大约 6 个不同的示例。第一个示例是参观 Gimble 无人机，它漂浮在我的眼睛和远处墙壁之间的场地上。我走向它，绕着它来回转，从不同的角度进行观察。
它就那么静静地悬浮在我的视野中，它周围的世界仍然存在，但是我的目光不能穿过它。它就好像是，真的拥有质量和体积一样，完全不像是一个漂浮着的图像。
我很惊讶地发现，我离这个机器人越近，在一定程度上，它的细节就会变得越清晰。向这个漂浮的物体的靠近并没有让它本身的像素格暴露，反而靠近之后能够突出一些原本在远处观察不到的细节。
但是如果我靠的太近，Gimble 有时会突然消失，有时我会进入 Gimble 内部。后来我被告知这是一个还未经过仔细打磨的样品。
我还注意到，我绕着它走的时候，无人机螺旋桨呼呼旋转的声音也会传向我，不论我在哪，这种声音都会传递到它应该到达的地方。
随后，系统工程高级主管 Sam Miller 和高级技术市场经理 Shanna de luliis 向我介绍了将三块计算机显示器上的场景投射到我所处的世界中的过程。
它们看起来就是那种大的、特别平整的电视屏幕或是显示器。神奇的是，虽然它们就一直呆在那里，但我却可以让它们在任意空间显示。
只要我愿意链接更多的屏幕，我就能制造更多的虚拟场景。在本次示例中，我最多只能使用三块屏幕，但这已经足够了，因为我需要转动头部才能看清它们的全貌。而此时，无人机仍然在那边静静地漂浮着。
在屏幕演示结束后，我又尝试了一个小型示例。
这一示例中存在着一个漂浮着的，有四个面的电视，每一面都在进行电视直播。我可以在这个电视周围走动，观看不同的频道，无论我是不是在观看，电视的四个面都在持续播放节目。
突然，房间中一道墙突然亮起了白色的光线，显示出门的轮廓。这时，门开了，一个女人走了进来。
她走向我，停在了几英尺之外，站定，人物的细节处理令人印象深刻，不过我不会把她错认为一个真正的人（人物散发出的光线、她的设计让她与一个真正的人仍然有差距）。
她没有和我说话或是对我所说的话作出反应，但是她确实有这种能力。Miller 手动控制着她，操控脸部展现一系列表情：微笑、生气、厌恶。
我注意到，当我移动位置或是环顾四周的时候，她的眼睛始终追踪随我的目光。Lightwear 内置的摄像头正在为她提供数据，让她与我保持目光接触。这让人有些不安，我甚至会觉得不礼貌而打断了这种眼神的接触。
未来有一天，这个虚拟的人类将会是你苹果手机上的 Siri、亚马逊的 Alexa 或是 OK Google，她们不再是一个只有声音而无形体的存在。她会和你一起行走、看着你、提供由人工智能驱动的具象化的帮助。
在这幢大楼中展出的示例集合了各种奇奇怪怪的想法。其中还包括一副巨大的漫画，你可以走过去，然后细细观看，就像是透过窗户看外面的风景一样。
今年早些时候，我和 Madefire 公司的员工聊了聊，Madefire 公司致力于让阅读漫画书这一过程更有趣。在佛罗里达州，我亲眼体验到了他们的成果，被深深地震撼了。
漫画书页面漂浮在咖啡桌上方，漂浮高度可以调节。当我靠近的时候，我可以围着它转圈，我可以看到平平的一层图像漂浮在空中，我还可以从不同的角度欣赏这些作品，就像是在欣赏一副墙上的画。
我的体验场景被设定在一场风暴中，周围的空气充满了落雨的感觉以及雷电的声音，这些微小的配合有大大的能量，将我强有力地拉进了虚拟场景中。
在另一个范例中，Magic Leap 向我展示了一个被称为「体积捕获」（volumetric capture）的快速演示。这个团队去了一些拍摄工作室，让他们用特殊设备拍摄了一些演员的现场表演。
把这些演员录入系统之后，他们基本上可以把这个现场演出带到用户所在的任何一个房间中。
虽然一些捕捉的细节会有些粗糙，例如鼻子和嘴唇之间的空间会过于圆润，但是整体印象是能够经得起近距离观察的。观众还能绕着正在表演的演员走动，从不同的角度观看演员。
我不能描述「体积捕获」究竟展示的是什么，但我可以说的是，人物的移动速度非常快，我必须目不转睛地看。
即使我在表演中走来走去，他们的表演也没有丝毫停顿或是减速。而且有人告诉我，这个现场演出可以放大或者缩到手掌大小。
光场
「我将这个行业称为『秋后的蚂蚱』，因为它并没有真的死去，只是暂时的沉寂而已，」Abovitz 说道。
我们在他的办公室观看着显示屏，屏幕上投放的是 19 世纪 30 年代的立体照相机。
这个立体照相机拍了两张照片，两张照片的内容是一样的，只是拍摄的角度略微有些区别，在视觉上呈现一种距离感。如果你把设备拿到眼前，你会发现有一块木头挡在你的眼前，只能看到木头前面的图片，而看不到那两张图片。这有点类似于 3D 的效果。
不过，Abovitz 对这一技术的描述显得过于平淡，对它的发展也是听之任之。
「这一技术在图像融合的过程中会产生冲突，导致眼睛无法正常运转，」他说。「以一种不自然的方式观看这两张图片，所呈现的 3D 图像也是不自然的。」
后来的 3D 技术都来自于 1838 年的这项技术。
「这对我来说是有点痛苦的。」Abovitz 说，「从 19 世纪开始，这项技术就不断再现。它被用在了电影院的红蓝眼镜上，从六十年代，一直用到了本世纪。而当 VR 再现江湖时，却发现它似乎是一样的东西，就好像我们仍然在使用同一个主意。」
20 世纪初的古董立体镜，也可以被称为3D观察器
19 世纪 30 年代的这项技术，利用了两个平面图像，而虚拟现实本质上也是使用两个屏幕。Abovitz 认为必须找到一个更好的方法。
他对提升虚拟现实技术并不感兴趣，相反，他希望寻求一种更好的方法来创建图像，这种图像要能够被放置在现实世界里人的视野之中。
简言之，他对混合现实技术颇感兴趣。
虚拟现实再现你看到的一切，而增强现实可以将图像带入你的世界，它在把图像加到现实世界的同时，也能了解你和你所处的世界。
例如，混合现实世界中的马会知道你的沙发在哪里，而不会从墙穿过进入你的卧室。
当 Abovitz 开始展开研究，想在瓶颈中寻求突破时，他发现，混合现实与感知世界中有两个他希望研究的事情。
第一个就是模拟光场信 。光场本质上是世界上所有物体上反射回来的光。
当你拍照时，你会捕捉到一片很薄的光场。而眼睛则看到更多的光场，从而允许人类感知到深度、移动以及许多其他视觉上的细微之处。
另一个 Abovitz 想要弄明白的事情就是，光场信 是怎样通过眼睛进入大脑的视觉皮层的。
「你对世界的看法实际上是建立在你的视觉皮层之上。」他说，「你的视觉皮层和大脑的一部分就像是一个透视引擎，你所看到外面的世界是由大约 100 兆个神经连接呈现的。」
目前的普遍看法是，大约有 40% 的神经功能被用于视觉处理。当你在做运动时，这个比例可以跳升到 70 到 80%。
「你基本上是在创造视觉世界。」他说，「你正在和视觉信 共同进行创造。它被称为动态模拟光场信 ，这是宇宙中所有无处不在的光子波和粒子的光场的术语。它就像是一片巨大的海洋，到处都是，是一种无限的信 ，包含了大量的信息。」
创建人工光场涉及大量复杂的信息，这很有难度，更不用说让它移动的情况了。
2011 年，Abovitz 把这个问题抛给了他在加州理工学院研究理论物理的朋友。他们提出了这样一种观点，即人类的视觉系统就像一个过滤器。
事实上，眼睛并没有真正看到任何东西，而是过滤出一大片较薄的光线，然后把它送到了视觉皮层。
「在这一点上，我们有点凭着自己的想法。」他谈到这套理论时这样说道，「我们偏离了方向。」
他们最终得出的结论是，在计算机中视觉皮层的功能非常类似于图形处理器，用眼睛得到的信息，给人构建一个感知世界，而且它只需要被提供非常稀疏的数据量就能做到这一点。
「也许从遗传学角度来看，我们都有几个世界的版本。我们所做的一切就是摄入稀疏变化的数据，然后更新模型，只不过我们的模型是永久的。」Abovitz 说，
「很多事情都是联结在一起的，例如人类在生存意义上完成了进化、繁殖，建立庇护，而我们的视觉系统也是从眼球看到指尖，从指尖看到中场，再从中场看到远场。这种结构让距离很远的老虎看起来就像一张扁平的卡片，在近处却可以看到老虎实难以置信的细节和形态。」
这就意味着，如果大脑获取了更多的信息，那么就会在需要时呈现出更多的细节。
这完全改变了 Abovitz 和他的团队对光场问题的认知。这么一来，如果理论是正确的，那么技术不需要捕获整个光场并重建；而是只需要抓住那片正确的光场，然后通过眼睛把它送到视觉皮层。
Abovitz 称这个理论为「脑系统工程观」。
他说：「我们的想法是，如果我们能够找出这个信 ，或者接近于这个信 ，那么把它编码成晶片会是一件很酷的事情。」「我们可以制造一个小晶片，从前端发射数字光场信 。这是一个关键的想法。」
忽然间，Abovitz 的思路开始从「试着去解决问题」转变为「设计一套解决方案」。他确信，如果他们能创造出一块芯片，把一个光场的正确部分送入大脑，它就能蒙骗过你的眼睛，让你看到那里有一些实际上并不存在的物体。
如果这个理论能够实现，那么就意味着他们正在逐渐摆脱显示屏，只靠人类已有的感官完成这个任务。
这里面存在两个核心的「禅学思想」：无显示便是最好的显示；外在与内在是趋于一致的。
事实证明，至少从我们目前看到的情况来看，他们似乎被证明是完全正确的。你所能想到的外界的一切，都是可以在身体的内部世界中描绘出来，这是由你和模拟光场信 共同创造的。
「每个人天生就具有创造力，因为每个人都在不断创造属于自己的虚拟世界。你所生活的世界，正在不断地被你创造着，被所有人共同创造的…这是非常令人兴奋的。」
因此，对于 Abovitz 来说，下一步便是做一些可以证明这个理论的东西。
你好，世界
Magic Leap 所描述的这一刻「你好，世界」，或许让其他人不屑一顾，但对于一个已经为证明这套理论而奋斗了 4 年的团队来说，它是能够带来精神快感的。
这套理论关于一个单一的像素。
「当时我们拿着操纵杆，在房间内移动。但是在虚拟世界中，我们只是一个个像素。那是我们第一次体会到这项技术的魅力，可能其他人不会理解，但我们为之疯狂。」Abovitz 说。
「这很像 1970 年的那款益智类游戏《Pong》。嗯，可能不像《Pong》那么复杂。我们只是把自己看作在屋内走来走去移动的小点，但那种感觉无与伦比：『哇，我们刚才做到了？』」
在 2014 年团队取得突破之前，Abovitz 将那些早年的经历称之为「在沙漠中游荡」。2013 年，他们才开始研发公司的第一个工作原型机。
Abovitz 向我展示了一幅图片，他们把这个巨型机称为「长凳」。但我告诉他，这看起来有点像一个蒸汽朋克风格的断头台，不过他纠正了我。
你把你的头置于一个悬挂着的由电子零件与电线组成的巨型屏下方，被一个装置完全锁住。
你坐在那里，一动不动，等着团队使用信 发生器来欺骗你的大脑，让你看到一些不存在的东西。
这个实验与测试的进程非常缓慢，而且效果令人沮丧。Abovitz 说，他经常去制造了小鹰 航空母舰与制造土星 5 运载火星的大楼寻找灵感。
当然，这支团队的成员也在不断发生变动，但很多好点子也在随着人员的流动而不断「迭代」。直到最后，正如 Abovitz 上面所说，我们终于得到了那个点。
这个点证明了他们的理论。「质变」之后，创新的速度就大大加快了。
不久，他们就把漫画书里的人物角色扔进了现实世界，讨论了创造一种叫做「怪兽大战」的游戏的想法。这个概念能够让孩子们去一个真正的游乐场，然后指挥着自己的巨型怪兽在他们的头顶上互相打斗。
这个时机来的刚刚好。Abovitz 知道，最终他将花光所有用于初创公司的资金，将不得不依赖于外部资金的补充。
幸运的是，像素点与那两个人物角色足以向谷歌和其它公司展示 Magic Leap 正朝着正确的方向前进。到 2014 年末，Magic Leap 成功筹得 5.4 亿美元的风险投资。
利用这笔资金，他们搬离了这个只有一间房子的办公室，开始致力于用这个技术研发首个可穿戴的设备，他们还为这个产品起了一个很亲昵的名字——Cheesehead。
「这就好像，我们研发了一个光场信 发生器，将之与计算机相结合，然后就可以移动了，」Abovitz 说。「这个设备差不多有 10 磅重。也就是在这个时候，我们才觉得我们需要将运动与高端的计算机设备进行结合。」
Cheesehead 可以从信 中提取关键元素，集中到纳米结构中，然后将之应用到一个晶片当中，创造出数字光场，帮助人们观察混合而成的新的现实世界。
这个造型奇特的巨大设备也可以帮助公司的软件团队对正在运行的代码进行测试。未来两年，该团队将继续对软硬件以及科学和设计进行迭代更新。
为了加速产品的研发和测试的周期，他们移到了劳德代尔堡（美国佛罗里达州东南沿海城市）郊外一个较大的地方，还在地下室建造了一个晶片制造间。
「从 2014 年 10 月到 2017 年 12 月，我们的取得了飞速发展。」他说。
魔力
在 Magic Leap 巨大复杂的地下建筑中一间干净的房间，机器人手臂和穿着兔装的人员进行着和谐的协作。
他们正在组装光子晶片，正是这种晶片给公司最新的也可能是更好的设备进行赋能。
Abovitz 带着我走在一条长长的水泥走廊上，随意停在一扇窗户前，他向我指了指窗子里面正在进行的事情。
Magic Leap 负责硬件和工程项目的高级副总裁 Paul Greco 解释说，整个地下不得不被完全掏空，重新按照他们所需要的格局进行建造。
Magic Leap 的人都无法向我讲诉更多有关晶片的事情，很可能是因为他们在 Magic Leap 从事的是一项很有魔力的事情。Abovitz 将这种晶片称为微小、半透明三角形的光子晶片。
不过，如果他不告诉我这些的话，我会简单的将之称为镜片。
「我们并不是在用晶体管移动电子。我们移动的是光子，这是一个具有三维纳米结构光线的光子信 。我们还没有正式为它命名，因此，我就把它称为 Sea Monkeys（海猴），不过这个名字我们不能用。我不想惹怒喜欢 Sea Monkey 的人。因此，我们正决定给这个结构取一个更酷的名字。」
他说，这个晶片在 3D 纳米结构中移动光子，使其能够输出一种极为特别的数字光场信 。这种光子晶片最终会进入一种更大更圆的镜片，然后被做成一副时髦的眼镜。
在楼上一个封闭的空间里，我第一次近距离接触 Magic Leap 的全部硬件，这个房间像一个时装展列室。公司设计高级副总裁 Gary Natsume 说，Magic Leap 所有的组件都根据同一种设计方式紧密地排列在一起。
Natsume 将一些银灰色斑点称为月球尘埃和标准原形。这个公司的第九代硬件是由三个组件构成——耳机、像 pod 一样的由一根长电缆连接的计算机，以及一个称为 Control 的控制器。
耳机看起来像一个缠了一根厚皮带的眼镜。眼镜很轻，看起来很有现代感，时尚不时尚就不太好说了。不过比市面上所有的虚拟现实设备都更好是确定无疑的。
「镜片的设计很有特点，」Natsume 说。「我们的愿望就是，它能像眼镜一样，人们可以每天带着它。」
眼镜的镜架采用的是「皇冠」式的设计，Natsume 说。「这样的设计可以使得重量均匀分配。」
人们要双手拿着这个「塑料皇冠」的两边，然后将其分开，皇冠会将眼镜的力分配到左右以及后部。然后就可以将眼镜套在头上了。
眼镜架后面有两根很短的线，大概四五英寸长，接到系统 Lightpack 时合成了一根。Lightpack 由两个相互独立的塑料圆饼状装置通过一根线连接。
Natsume 说，这种设计是为了方便夹在口袋或者肩带上，根据他的表述，这种带子很像吉他盒的那种背带。
眼镜的型 有两种，前额、鼻子以及太阳穴的托架都可以进行定制，用户使用起来也会更加舒适。在眼镜发售的时候，公司也会为那些戴近视眼镜的人提供佩戴说明书。
控制器是一个圆形的塑料设备，大小放在手上正合适，带有一排按钮——六档自由移动的感应器和一个触摸板。
Lightwear 与 Lightpack 的设计都看起来像玩具，并不是因为团队感觉很廉价。相反并不是这样，而是因为它们很轻很小。Abovitz 很快就指出了这一方小小空间到底装了多少东西。
「这是一个独立的计算机，」他说。「就像 MacBook Pro 或者 Alienware 计算机一样。带有强大的 CPU 和 GPU，还有驱动，WiFi，各种电子原件，就如同一个迷你计算机一样。」
说着，他指了指 Lightwear 眼镜，说道：
「这里面有一个很强大的的计算系统，它能够对世界实时感知、进行计算机视觉计算、并且具有机器学习功能，它正时刻观察你所处的外部世界。可以说在这样一个轻便的设备中，集结了航空水准的工程技术。」
这款头显能够通过四个内置的麦克风感知用户周围的声音，并且搭载了六个外部摄像头，通过计算机视觉技术感知佩戴者所处的世界。这一切都是实时的。
设备在佩戴者太阳穴的位置内置了体积微小的高端立体声扬声器，用来对佩戴者的某些行动作出反应，或者对佩戴者在现实世界中正在交流的人或物的行动作出反应。
「它不单单是一副内置了摄像头的眼镜，」他说，「更重要的是它的空间计算能力，它的设计中充满了感知层面的东西。」
Abovitz 拒绝回答例如「该头显采用何种 CPU 或 GPU」等计算硬件相关的问题，甚至连电池的续航能力也表示无可奉告。
其中有一部分原因是他们仍在对电池进行优化，另一部分原因是他们需要保持神秘，等到发布当日再具体揭开这些参数的面纱。
在我将要离开的时候，我注意到一张被白布包裹的长长的桌子。「白布下面是什么？」我问。「下一款产品的原型。」Abovitz 说。
Sigur Ros 的音乐与 Weta 机器人
在此次探访的最后一站，我来到了一个体验间。
Miller 问我感觉如何，我说，眼镜佩戴很舒服，以至于有时会忘记它的存在。计算装置装在我的口袋里，很服帖。而且它和头显之间的传输线也不会影响到我的行动。控制器的反应很快，设备发出的声音精准有力。
但我只有一个顾虑——视野（视场）。
和微软的 HoloLens 一样，Magic Leap 的 Lightwear 也没有创造出非常贴合人眼习惯的视野（HoloLens 通过另一套完全不同的技术创造 MR 视野）。
Magic Leap 的显示视野和眼镜的边框大致吻合，但由于画面漂浮在三维空间内，我不能很好地测量它的视野大小。
因此我做出了一个非常聪明的举动，我掏出了一张信用卡放在眼前，然后挥舞我的手掌，希望通过观察手掌的出现与消失情况估计视野大小。
实验的结果是，Lightwear 的视野域大致等同于半弯着手臂时手持的一盒家用老式录影带的大小。虽然同 HoloLens 相比，视野域已经大很多，但仍旧差强人意。
「我可以肯定的是，我们的下一代硬件技术将会在视野域方面大幅提高。」Miller 说，「你现在感受到的视野域就是这次发货的初代产品的视野域了，但是下一代产品将会显著改善。我们在实验室中已经有研究人员在对下一代产品进行开发了。」
De Luliis 补充说，开发者已经提出了去掉视野边框的解决方案，这样佩戴者就不会对图像的边界有那么强烈的感受。「然后你的大脑会自动帮你补全缺失的图像。」他说。
Miller 想给我看另一个巧妙的设计。他走到大房间尽头，并让我启动 Gimble。
无人机乖乖地出现在远处，漂浮在 Miller 旁边。然后 Miller 和机器人走到了同一个地方，很快就消失了。好吧，我仍能看到他的腿从无人机的底部伸出来。
我的第一反应是「这种事情也在所难免」，但后来我意识到，我看到的是由 Magic Leap 技术创造出来的一个虚构物，且完全被它糊弄住了。我亲眼看到两个物体出现同一个地方，且认为那个虚构物而非工程师才是真实的，就这样把 Miller 忽略了，至少 Abovitz 后来是这样向我解释的。
最后，我去了一个单独的房间，得以对一种特别的体验一探究竟。
冰岛实验摇滚乐队 Sigur Ros 与 Magic Leap 的一些工作人员合作，试图创造一种体验，他们喜欢称之为声景观（soundscape）。在观看这个特别的演示时，我被要求戴上耳塞和护目镜。
「你将看到的是一个叫作 Tonandi 的项目，」项目技术负责人 Mike Tucker 告诉我，「你将看到的不是一种录制曲目，而是一种交互式的声景观（soundscape）。他们喜欢这么描述它。」
Tonandi 首先在你周围创建了一圈飘起来的树，然后等着看你的反应。
树环浮在我的周围，像一些小精灵在空中跳舞。当我向他们挥手时，他们发出了一种嗡嗡声，并在我周围渐隐渐移。随着时间的推移，各种各样的创造物出现了，我触摸他们，向他们招手，轻拍他们，等待着看这些动作会产生什么样的音乐。
很快，地上冒出了豆荚的长茎，地毯和咖啡桌上长出了草。我注意到豆荚像花蕾一样绽开，我的周围漂浮着黄貂鱼形状的五彩灯。
我的动作不仅能改变周遭这个小世界，它还可以让你对听到的音乐进行创作，将我的动作与 Sigur Ros 发出的声音结合起来。
体验 Tonandi 的创作很轻松。那种超现实并注入了魔幻现实主义的音乐创作，任何人都可以去尝试。但是幕后工作却很费力、Tucker 说，Magic Leap 在这个项目中内置了大量的技术。
「我们在 Magic Leap 中添加了很多特殊性能，」他说，「我们使用了房间 格划分和眼球跟踪，我们利用输入系统来分析你的手势，从而创造出你的大部分体验。」
后来，在会议室里吃午饭的时候，Abovitz 说了团队曾经做过的一次恐怖实验。「太可怕了，」他说，「人们再也不会进那个房间了。它非常非常可怕，就像死亡威胁一样，所以我们就决定，好吧，让我们暂且把它放到一边。』」
还有很多想象空间，但我没有体验到。
我曾设想过的一个场景是基于维塔工作室（Weta Workshop）的作品。电影《魔戒》《银翼杀手 2049》和《雷神：仙境传说》的特效与道具就是由该工作室负责的。但是这个想法没有机会得到测试。
该工作室正在开发的一款游戏，最初是由维塔新成立的 Weta Gameshop 部门所创建，内容围绕 Grordbort 博士的奇妙宇宙，由维塔的概念设计师 Greg Broadmore 创作，权属于维塔工作室的两位创始人 Richard Taylor 和 Tania Rodger。
Taylor 告诉 Glixel，目前新部门由 Broadmore 负责，其中有大约 55 人致力于该款游戏的开发工作。
「我们已经在这款游戏上研究了五年时间，」Taylor 说道，「我们一直在开发这款游戏，这些工作直接关系到 Magic Leap 的软硬件开发。」
这是一款第一视角射击游戏，背景设定为 Grordbort 博士的恶搞世界。Taylor 认为这款游戏将在明年硬件推出后得以问世。
在这款游戏的虚构世界中，某个机器人星球找到了一种制造地球入口的方法，并开始入侵地球。玩家必须使用系统的控制器（操作起来就像一把射线枪）来阻止他们通过这些入口并行驶破坏行为。
「当你进入角色时，地球入口会出现在你的休息室或卧室墙壁上，你可以看到机器人星球的样子，」Taylor 说，
「Gimble（其中一个演示中出现过的那个机器人）会带给你一个平静的开场，然后 Grordbot 博士会和你进行一段谈话，接着冒险就开始了。这是最疯狂的现实体验。」
死磕现实
价值数十亿美元的 Magic Leap 技术有时看起来似乎没什么难度系数，因此人们很容易低估它的技术含量。而在某些方面，这是该技术的关键创新点之一——它可以让你感觉不到它的存在。
Abovitz 及其在 Magic Leap 的团队希望解决的其中一个基本问题是，人们在佩戴虚拟现实耳机和长时间面对屏幕时会产生普遍的不适感。
「所以我们的最终目标是将空间计算建造为一种大众化的、随时随地可得的东西，」Abovtiz 告诉我，
「这个目标野心很大，要花很多时间才能实现。但你总会需要一些轻松舒适的东西。它必须适合你，就像你的袜子和鞋子。它必须非常适合于你的脸和身体。而我认为其中最基本的就是，这些信 必须与你紧密兼容。」
他说，他们需要找到一种重现光场的方法，使最终的观看体验与你周围的景色一样自然舒适。他说，这是 Magic Leap 的工作基石。「你再也不想去思考它了。」你只需知道我们已经照管好了一切，而我们认为这是重要的第一步。
而该技术的基础可能已经被解决。但当我提出视野的有限性时，Abovitz 承认，这种体验的传递过程还不够完善。他说公司仍在微调体验过程。
「我们将视野称之为可行的以及利于 ML1 的，」他说的是即将推出的第一款消费级耳机，「无论是在 Magic Leap 2 还是 Magic Leap 3 等，这是我们将继续进行迭代的特性之一。而这就好比，你打磨出了一种产品规格和视野体验……在这方面我已完成我想要的了。」
Abovitz 并没有真正回答我的问题，他没有指出关于这项技术的另一个主要痛点，那就是对视觉焦点问题的处理。
理论上来说，AR 光场隔在人眼与现实世界之间，人眼需要能够透过 AR 光场看到现实世界。但在这样的机制下，若人眼关注现实世界，则 AR 影像将会失焦。
我翻阅了一些文档，发现这些 AR 眼镜都没有提及到如何有效处理这个问题。所以我希望从 Abovitz 那里得到答案，这项技术到底能否解决多焦平面问题（一种光学术语）。
在 Abovitz 过后补给我的一封邮件中，他这样写道：
「Magic Leap 的 Lightwear 采用的是我们特有的 Digital Lightfield 专利技术，是我们模拟光场信 的数字信 版本。采用这项技术，开发者能够创造出视觉体验良好的应用程序，程序中的人物和物体会出现在合适的空间范围内，不会对人眼造成困扰。」
当我想要追问更确切的答案时，Abovitz 以涉密为由拒绝了。
以 Abovitz 的视角看来，作为首款产品，这款 AR 眼镜首先能够正常使用，其次能够印证它的名字——Magic Leap One: Creator Edition（创造者版本）。
对于 Magic Leap 来说，Creator 是开发者、品牌方、代理商，以及一小部分早期消费者。
「这些消费者是那些购买第一款 Mac 以及第一款个人电脑的人。」他说，
「首批购买 iPod 的这些人，这些有探险精神的消费者会想要购买我们的产品。虽然如此，但我们的产品绝非是一个开发者套件。如果你是一个具有创造欲望的消费者，那么你会非常喜欢我们的产品。」
对于发售日期及价格，Abovitz 也不肯给我明确的信息。
但是他表示，第一款产品将会毫无疑问地在 2018 年发售。至于售价，「我们内部已经有了一个定价，但是暂时还不方便透露。」他说，
「定价会在预定开始时对外宣布。我想说我们的产品不仅仅是一个高级的计算系统，也不仅仅是一个高端且具有工艺美感的电子设备。」
除了没有得到一些关键问题的答案之外，在 Magic Leap 公司到处游荡的这一整天让我意识到，这家公司真正想要达成的成就是什么：
绝不仅仅是头显设备，也绝不仅仅是头显设备背后的光场技术。Magic Leap 正以头显为载体，将一系列杀手级技术融合到一起。而这枚头显，或许会在未来的某一天，重新定义当今的科技。
光场可以在人们所处的自然光世界中排列出一个虚拟现实画面，这也是呈现出来的最明显的创新之处。不过，惊喜并不止步于此。
视觉感知系统正在不断跟踪你所路过的世界，会注意到所有种细节，包括各种平面、墙壁以及物体。
结果就是，这款头戴式设备能够看到你做了什么，然后会让自己创造的物体适当地行动。这样一来，无论你旁边是否挂着一个混合现实监视器，都能确保你客厅中漂浮的鱼不会穿过沙发。
这个房间地图也会记录你的世界中所放置的各种东西，所以当你回来的时候，这些物体会在原处等你。如果你在桌子上面摆上六个监视器，然后去睡觉，那么第二天他们还会处在你放下他们的地方。
尽管我们不知道 Lightpack 内置微型计算机的规格，但我们知道，它被设计用在一个可见、可感的世界中运行游戏。
而控制器是一种能直接与系统进行交互的方式，当然你也可以使用 Magic Leap 自带的姿态追踪，它不仅包括手和手指的追踪，还包括头部位置、声音、眼球追踪甚至更多。
最后，这项黑科技不仅使用光场技术，也用到了声场技术。感知立体声系统可以跟踪你的移动和反应，以确保无论你站在哪里，回声始终来自于物。它还可以传达距离和强度信息。
这些软件和硬件仅是构建 Magic Leap One 及其 Lightwear、Lightpack、Control 三部分的基础。
事情结束后，团队送我去 Abovitz 的办公室告别。他坚持亲自送我到门口，并在通往出口的路上停下了脚步。
附近楼梯间的墙上挂着一副画，那是画家 Salvador Dali 的作品，题为「用带有全息图和计算机的眼镜去看想象的物体」。
Abovitz 认为，这幅作品就代表了 Magic Leap 在重建光场方面的工作。他的手指依次点过画里类似数学公式的涂鸦，眼镜、视野以及看起来像是视觉皮层的位置。
这就是 Dali 版的 Magic Leap，用魔幻现实主义绘画手法创作
在这幅图里，我看到的是外部图像被吸收，同时也被视觉皮层和大脑处理。
而 Abovitz 的看法则相反：这幅画显示了计算机生成的图像被注入大脑，然后投影到了用户的世界。
声明：本站部分文章及图片源自用户投稿，如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢！