独家:苹果的增强现实高管谈论为什么苹果手机和iPads正在转变为世界地图、物体扫描工具，以及为什么这比眼镜更重要。
据报道，在不远的将来，苹果公司将推出一款增强或混合现实耳机。苹果还没有讨论任何头套。但是增强现实在苹果手机上很活跃，而且越来越好。
苹果在2017年开始了它的增强现实之旅，引起了轰动虚拟宜家家具和逼真的户外场景口袋妖怪围棋大战。今年，我一直站在街角扫描消防栓用苹果的新iPhone 12 Pro。我已经绘制了我房子的内部地图。我在自己的地板上穿过岩浆河。
在许多方面，苹果的深度传感激光雷达传感器在最新的苹果手机和苹果平板电脑上先进的3D扫描可能性，感觉是未来苹果耳机的脊梁。
脸谱网,微软和神奇的飞跃已经在探索旨在融合虚拟和真实的护目镜和眼镜未来将推出更多耳机使用高通芯片。但根据苹果增强现实主管迈克·洛克威尔(Mike Rockwell)和苹果增强现实高级产品经理阿勒桑德拉·麦金尼斯(Allessandra McGinnis)的说法，苹果现在的增强现实任务是让你口袋里已经有的设备更好地工作。将增强现实与现实世界的位置分层自动弹出体验，同时基于增强现实的能力制造创新工具和开发辅助技术，从长远来看，可能成为最大的杀手级应用。
洛克威尔说:“增强现实有着巨大的潜力，可以通过今天存在的设备和明天可能存在的设备来帮助人们的生活，但我们必须确保它是成功的。”“对我们来说，最好的方法是启用我们的设备生态系统，让它成为人们投入时间和精力的健康和有利可图的地方。”
洛克威尔和麦金尼斯还和我谈论了与三年前相比，现在有什么不同，以及为什么手机对接下来的事情如此重要。
苹果杀手级AR应用:你已经有的手机
虚拟现实耳机，如Oculus Quest 2虽然质量不断提高，但与手机相比，仍未被许多人使用。除了已经卖了500万的索尼，售出的VR耳机“没人真的在说数字”PlayStation VR耳机摩尔洞察公司的高级消费芯片分析师安塞尔·萨格说，到目前为止，尽管“任务2很有可能在第一年售出500-600万部耳机。”但即便如此，那些虚拟现实耳机使用的应用程序通常感觉与我们日常使用的手机和电脑相去甚远。增强现实耳机仍然没有大量存在，即使是多年以后神奇的飞跃和微软的全息透镜承诺一个混合现实的未来。
洛克威尔指出:“对于只使用虚拟现实或试图使用增强现实体验的开发人员来说，这是一条非常艰难的道路。”。“只是外面没有那么多(设备)。”与此同时，苹果公司可追溯到2017年的增强现实手机和平板电脑的绝对数量达到了数亿。“即使你只对相对较小的比例感兴趣，这也是一个巨大的数字。”
苹果公司表示，已经有7000名开发人员开发了10000款支持增强现实的iOS应用，其中许多专注于购物或家居装修，以此作为在家里实际使用增强现实的一种方式。实用性正是苹果目前最关注的。“我们想为开发者提供一个可以谋生的平台和生态系统，”洛克威尔说。
而新冠肺炎大流行对于大多数人来说，已经关闭了实体业务并减缓了旅行，使用增强现实工具进行家庭购物是苹果目前关注的主要部分。就像谷歌和微软正在寻找方法，让你在家里用手机看你想买的3D东西一样基于电话的增强现实工具，苹果与其Safari浏览器的连接启用弹出增强现实购物看起来像是去商店的替身。
“家得宝发现，当人们在增强现实中观看一种产品时，他们转换的可能性是其他人的两到三倍，”麦金尼斯指出，他引用了Shopify和Build.com的数据，这些数据显示购买的可能性更大(94%)，回报率低22%。
包括Adobe在内的应用程序开发人员AR创意应用Aero对于苹果的iOS来说，似乎也是如此看待基于手机的增强现实。“耳机在我们的路线图上，没有一个达到对我们来说有意义的部署的临界质量，”Adobe的AR负责人斯特凡诺·科拉扎(Stefano Corrazza)在谈到为什么该公司除了从Oculus收购Medium之外，还没有探索耳机创意工具时说:“直到我们有一个苹果或谷歌在那里大规模地投放一些东西，我们推广它没有太大意义。”
与此同时，像新款999美元这样的智能手机iPhone 12 Pro可以成为主要的创意工具，在未来发展成为耳机。科拉扎说:“即使有耳机，手机也将是所有计算发生的地方。”"你可以潜在地流向眼镜."
那是同一个型号高通已经在继续发展未来的增强现实/虚拟现实设备也是如此，但这可能需要数年时间。与此同时，还有电话。“在一段时间内，它将是消费的主要设备，”科拉扎谈到iPhone 12 Pro时说，“但对于扫描和3D内容来说，它也是一台非常强大的机器。”Adobe还没有在Aero上使用3D扫描工具，但可能会探索将来整合这些功能的方法。
生日快乐，奥利维亚经过奥尔本在Sketchfab
激光雷达作为一种创造性工具向增强现实迈进了一步
苹果在增强现实中的第一步，与iPhone 8一起，只是使用手机的运动传感器、陀螺仪和内置摄像头来识别楼层。然后它认出了墙和人。支持激光雷达的iPhones和iPads可以从后置摄像头附近的一个黑色小圆圈中无形地喷射出一系列红外激光，通过快速划分(3D映射)房间的全尺寸，这又向前迈出了一大步。这也包括空间中的3D对象和人。这是谷歌几年前探索的一种技术的演变深度感应探戈手机，但是在更高级和更广泛的范围内。许多早期的激光雷达应用程序，如Polycam、3D扫描仪和Record 3D，都非常有创意，并且专注于3D捕捉，与2017年的恐龙魔法、游戏增强现实应用程序相比有了很大的转变。
“这是我们在设备上安装扫描仪的部分原因。洛克威尔说:“我们觉得这是一项关键技术，可以带来3D资产的爆炸式增长，可以用于各种用途。”“它还开启了以某种方式开始扫描环境的可能性，并使创建3D对象变得更加容易。”
布鲁克林浴室壁画经过奥尔本在Sketchfab
互联网上最大的3D对象存储库之一Sketchfab已经看到了增长，尽管在此之前已经在3D扫描方面进行了多年的探索。Sketchfab刚刚吸引了400万用户这是自2012年这项服务开始以来第一个盈利的月份。
但是正如Sketchfab的首席执行官Alban Denoyel所说，他经历过以前他期望3D对象繁荣的时代。当VR耳机在2016年与几款谷歌3D扫描探戈手机一起亮相时，有很多炒作。然而，市场采用并没有发生，导致了德诺伊尔所说的“虚拟现实冬天”。现在可能终于开始好转了。
Snapchat已经在探索了使用激光雷达进行增强现实效果这可以把虚拟的东西放入真实的世界，甚至有更大规模的扫描整个城市街区的实验。“我们认为深度是非常基础的，”Snapchat的相机平台副总裁艾坦·皮尔普斯基说。
尽管有这些可能性，但我发现学习使用这些新工具可能会令人望而生畏。苹果自己的增强现实创作工具Reality Composer和Adobe的3D增强现实创作工具包Aero不一定是你可以立即下载的应用程序，我仍然认为它们是我避免的应用程序。到目前为止，我尝试过的3D扫描应用非常有趣，但也是实验性的，而且并不总是直观的。苹果公司在很大程度上把3D扫描应用程序的世界交给了开发者，而苹果公司的日常核心iOS工具根本没有纳入这些功能。
苹果在iOS范围内对3D对象的支持确实提出了一种3D东西最终可以像pdf或照片一样共享的方法。但是在某些方面，未来的创造性工具还不完全存在。
摄影的可能性也是惊人的，苹果自己的相机应用使用iPhone 12 Pro的激光雷达提高夜间照片和肖像的焦距。但是苹果公司还没有将增强现实纳入其相机应用程序，也没有允许任何3D扫描。这些想法留给开发者去探索。一些应用程序，如DSLR相机，已经使用苹果手机的激光雷达在照片数据上创建自定义的3D信息层，将3D文本分层到照片中。
“这个应用程序能够计算出人和背景物体之间的分割，”DSLR照相机的创造者富维奥·西奇隆说。“增强现实肖像的未来计划...就是用陀螺仪或你的手指移动画面的框架。”
人员检测使用增强现实技术识别人员并测量距离。
作为扩展感官的增强现实，以及一个可访问的工具
苹果认为增强现实的杀手级应用是可发现性，但可访问性还有另一个巨大的机会。AR可以字面上扩展一个人的感官。在音频领域，苹果已经在使用作为助听器的光盘，Facebook正在探索辅助听觉空间音频还有。
辅助视力也是如此。未来视觉辅助产品，如Mojo Lens承诺增加隐形眼镜旨在成为视力受损者的有用工具。苹果公司可能会在苹果手机上的增强现实和未来的设备作为辅助工具的工作方式上采取类似的方式。已经是新的了iOS 14.2中的人员检测功能使用苹果的增强现实和激光雷达来识别与人的距离，并将其用于新iPhones的视觉辅助。
这可能只是个开始。“我们可以做的还有很多，尤其是与我们对周围环境的理解有关的，”洛克威尔说。“我们可以识别人，但是如果你想一想一个人对环境的理解，没有理由在适当的时候一个设备不能也有那样的理解水平，并提供给开发者。”
麦金尼斯补充说:“我们将与盲人和弱视群体合作，特别是在人群检测方面进行改进。”
阿利克佳·夸德在《急性艺术》中举办的基于位置的增强现实艺术展览。
增强现实未来杀手级应用:即时
尽管我一直在报道增强现实，但我承认，当我在日常生活中使用苹果手机或iPad时，我忘记了寻找新的增强现实应用。当我忙于现实世界时，发现虚拟世界中的新东西并不是一个无缝的过程。
洛克威尔认为iPhone AR的未来不是应用程序，而是快速浏览的时刻。他解释说:“你一天三次、四次、五次、六次地去做各种事情，这些都是轻量级的体验。”。“杀手级应用程序实际上是，它将一直以这种小方式定期使用，帮助你做你今天做的事情，让它们更容易、更快。”
通往这一目标的道路包括应用剪辑这是苹果公司在iOS 14中推出小型微应用的新方法，无需下载任何东西就可以在iPhone上出现。应用剪辑可以由放置在现实世界中的NFC标签或可扫描代码触发。我可以扫描或点击，突然调出与我所在地方相关的增强现实，比如虚拟菜单或生动的博物馆展览。
这也涉及到苹果的地图绘制工作。苹果新的定位锚意味着虚拟增强现实对象可以存在于现实生活中的位置——想象在时代广场看到一件虚拟艺术品——由多人同时共享。
“如果是在我们拥有高分辨率地图的地区，这在美国相当多...“如果在一米之内，你可以体验一下，”罗克韦尔在谈到定位锚时说，他承诺定位精度将优于全球定位系统。与此同时，由现实世界中特定二维码或锚触发的应用程序剪辑“可以精确到厘米”。
对于苹果的增强现实技术来说，这两项工作都还在进行中:在大流行导致的隔离的一年里，人们可能不太可能出现在公共场所或商店或博物馆，在那里这种基于位置的增强现实技术可能会出现。但是苹果认为它们对人们日常使用增强现实至关重要。
洛克威尔说:“我们知道，为了让增强现实成为一种主流体验，我们必须解决这些问题——我认为，对于人们来说，增强现实成为他们日常生活中更重要的一部分，我们真的处于风口浪尖。”
急性艺术公司首席执行官雅各布·德吉尔说:“我认为应用程序剪辑和主播将会产生巨大的影响。”。急性艺术是一个已经在现实世界中举办增强现实展览的应用程序，但是目前人们发现这种艺术的挑战之一是知道它在那里。“主要问题不仅仅是增强现实，现在科技领域的一切都是，‘嘿，你怎么让人们下载你的应用？’"
AR面临的另一个挑战是——真的，这不是一件事。是3D艺术吗？是空间扫描世界，更好的感知一切的一系列工具吗？那样的话，也许AR是隐形的。也许这是一种类似于谷歌如何看待增强现实的哲学世界扫描工具。
“我们经常听到人们在使用增强现实应用程序，但不知道它们是什么，”麦金尼斯说，他指的是像沃比·帕克那样的流行的iPhone工具即时增强现实眼镜试戴。“随着越来越主流，你知道是不是AR也没关系。重要的是你在你的设备上有一个惊人的体验。”
未来的基础工作现在正在奠定
结合苹果基于激光雷达的3D扫描，苹果越来越强大的增强现实工具的逼真视觉效果，加上AirPod Pro的空间音频介绍，它可以让你听到的东西听起来像是在3D空间中移动，不难想象未来的苹果AR耳机。
苹果对此不予置评。但与此同时，该公司正在努力鼓励越来越多的开发人员制作增强现实就绪的应用程序。无论耳机是否会很快出现，更具空间感知能力的iPhones和iPads都将把手机转变为具有自身可能性的世界扫描设备。或者甚至用于机器人，或者在意想不到的地方作为计算机视觉摄像机。
洛克威尔说:“这些事情在开始的时候是一件微妙的事情，你必须有所有的元素，所有的成分，才能成功。”。
“几年后，就像互联网一样，没有它你会记不起生活在哪里，”他补充道。“你会觉得，哇，我经常用这个...它将融入我们的生活。”
