大学教育网

苹果的新iOS15功能将非常适合AR眼镜

导读 Apple 还没有耳机,但适用于 iPhone、iPad 和 Mac 的最新软件一直在打下,基础又一年,在一年一度的WWDC 大会上,Apple AR 眼镜又

Apple 还没有耳机,但适用于 iPhone、iPad 和 Mac 的最新软件一直在打下,基础又一年,在一年一度的WWDC 大会上,Apple AR 眼镜又一次缺席。在该公司第二次全虚拟版本的开发者大会上,没有人看到苹果期待已久的 VR 和 AR 耳机。也没有新的大型 AR 推动。你本可以离开 WWDC 主题演讲,认为 Apple 根本没有强调 AR。至少,到目前为止:2021 年还没有结束。

其实仔细一看,已经有很多拼图散落一地了。Apple 的 ARkit 和 RealityKit 开发人员工具添加了一些更深层次的功能,以管理覆盖在现实世界上的更多对象和更大的虚拟景观。核心应用程序也开始获得一些 AR 钩子:Apple Maps 正在添加 AR 方向,就像谷歌地图已经做的那样。此外,与Google Lens非常相似,Apple 正在引入阅读和搜索照片中的文本或通过相机应用程序的方法。

空间音频、共享和 FaceTime:远程呈现的开始?

蒂姆·库克走上 WWDC 的虚拟舞台,面对苹果公司已经存在三年的增强现实化身 Memoji 的观众。也许它是为了代表我们所有人在家观看的感觉。我一直看着它,思考远程呈现的未来。

Apple 还没有自己的社交 AR 通信应用程序,但其他公司有。Spatial是一个例子,该公司在耳机和手机上拥有自己的 VR 和 AR 应用程序。其中许多依靠空间音频来创造一种存在感和直接的注意力。Facebook 认为空间音频是人们如何使用 AR 眼镜进行交流的基石。

在 iOS 15 上,Apple 正在为 FaceTime 通话添加空间音频。如果您没有玩过 VR 或 AR 社交应用,FaceTime 中的空间音频可能看起来有点过分。我还没有在 iOS 15 上尝试过,但我觉得这比看起来重要得多。在较大的群体中,它可以帮助创建一张谁在哪里的地图。在 FaceTime 网格上,这可能无关紧要。但在一个带有悬停 FaceTime 全息图的最终房间里,就像微软已经在 Hololens上的 Mesh 中玩一样,它可能真的很关键。空间音频越来越多地融入 Apple 的 ARKit 功能,这让我想知道接下来会发生什么。

FaceTime 中添加的共享工具,虽然感觉像是对 Zoom 的迟到,但似乎非常重要。如果 Apple 正在为眼镜开发一种操作系统,让人们可以共享世界,那么 Apple 将需要弄清楚人们如何立即相互连接和显示应用程序、内容等。发展自己的 Facetime 工具似乎是第一步。

实时文本和地图:AR 作为一种有用的工具

如果您以前听说过,请阻止我:增强现实可用于帮助人们。谷歌多年来一直将辅助增强现实作为重点,谷歌地图和谷歌镜头都以不同的方式使用增强现实来显示弹出式方向或分析现实世界中的文本和对象以将信息叠加到它们上。

自八年前的谷歌眼镜以来,这一直是 AR 眼镜的梦想目标。Apple 在 iOS 15 上引入这些类型的功能表明,它已准备好将 AR 视为不仅仅是一种神奇的体验或一种购物方式。App Store 上已经有很多有用的支持 AR 的应用程序,但苹果自己的操作系统并没有太多地集成它们。地图和实时文本似乎都是这种整合的开始。

对象捕捉:Apple 将如何发展 3D 扫描的预览?

在 WWDC 上发布的专业工具允许开发人员从现实世界的对象中制作高分辨率 3D 文件。iPhone 和 iPad 已经可以通过应用程序和硬件功能(如激光雷达)进行惊人的 3D 扫描,但扫描质量可能不可靠。Apple 之前从未制作过自己的 3D 捕捉软件,但 Object Capture 只是一个开始。

许多现有的 3D 扫描工具将图像捕获数据映射到 3D 深度图,而 Object Capture 将一堆照片(通过 iPhone 或 iPad 或其他方式捕获)转换为高分辨率 3D 文件。处理部分发生在 Mac 上,起初感觉像是断开连接。Apple 的 iOS 硬件——尤其是M1 iPad Pro——似乎有足够的处理能力来处理此类任务。

Mac 被 Apple 用作 3D 处理工具,但它也可能成为探索 Apple 如何在未来更强大的 iPhone 和 iPad 上进行 3D 对象捕获的垫脚石。

对象捕获工具现在被用于一个非常实用的目的:在明年让支持 AR 的电子商务站起来。虚拟购物体验已经在大流行中证明是有效的实验,而且看起来 Apple 正计划通过 Object Capture 为 Etsy 等公司提供 3D 事物库,Etsy 计划在秋季扩大其 3D 购物库存,Wayfair,它正在使用 Apple 的工具包为通过其商店销售的制造商制作自己的扫描应用程序。

但在某些时候,3D 捕捉也将适用于普通人:不仅仅是分享事物,而是构建可以在 AR 中生活的物体和世界。Apple 可能还没有准备好在其硬件上部署所有这些部分,但 Object Capture 将 Mac 带入了 AR 开发领域。

Apple 的真实世界 AR 层正在缓慢进化

要拥有在现实世界中工作的 AR 眼镜,您需要一个为 AR 映射的现实世界。在过去的几年里,苹果一直在使用配备激光雷达的汽车逐步重塑其世界地图。许多城市正在成为现实世界中可以标记到物理位置的 AR 的能力。对于 Apple 来说,这些城市目前都位于,而伦敦是秋季第一个在以外的城市。Apple 最新的 ARKit 工具需要基于位置的 AR 数据层,以便为多人体验或下一版地图中弹出的基于 AR 的方向等内容呈现虚拟艺术。

Apple 还希望进一步使用类似 QR 码的 Apple 标签来标记真实物体,称为 App Clip Codes,当扫描这些标签时,会显示 AR 效果,可以映射到被扫描的物体或附近的物体。这些标签可以启动 Apple 的迷你应用程序 App Clips,该应用程序是去年在 iOS 14 中发布的,但采用了支持 AR 的格式。Apple去年开始研究这个想法,但看起来现实世界中标记对象的进展缓慢。也许我们会看到产品(Apple 自己的产品或 HomeKit 配件)开始获得这些应用程序剪辑代码。

许多其他公司也在追求基于现实世界的多人 AR:首先是Snapchat、Niantic、谷歌、微软和Facebook。与这些竞争对手相比,Apple 的进展如何可以决定 Apple 发布一款设计为一直佩戴的高级 AR 眼镜的速度。在此之前,Apple 预计即将推出的 VR/AR 混合头显可以通过减少对现实世界户外场所的依赖来弥补开发人员的差距。

下一个是专业耳机吗?

苹果明年可能会拥有自己的 AR/VR 硬件。但是,根据对苹果之前发布新平台的方式的估计,该公司很有可能需要更早地开始讨论新软件及其显着不同的操作系统,可能要提前一年。这些新的 AR 工具正在帮助创建新的共享、捕获和辅助维度,这可能会导致苹果耳机的下一步发展,这些耳机将强调现实世界中的交流、协作和显示虚拟事物。

苹果迟迟进入 AR/VR 耳机领域并不是什么新鲜事。事实上,Apple 往往在新技术(例如 Apple Watch 或 iPhone 或 AirPods)上出现较晚。虽然 Facebook、Snapchat 和微软等许多公司正在更多的实验阶段分享他们的新兴想法,但苹果可能正在等待更全面地烘烤其第一款耳机。或者,继续做它已经在做的事情:在公开场合,逐个功能地发展 AR 软件。