visionOS

通过 iPhone 实现对象捕捉 / Object Capture

使用你的 iPhone 或者 iPad 实现对实现物体的对象捕捉并创建 3D 模型。

Jun 19, 2024 • 4 min read

什么是对象捕捉？

对象捕捉（Object Capture）通过多角度拍摄物体，使用图像识别和计算机视觉算法来分析这些图片，从而重建物体的三维形状。

在 iOS 平台上，Apple 提供的专门的 Object Capture API，开发者可以利用 iPhone 或 iPad 的相机和其他传感器（如 LiDAR 扫描仪），来捕捉物体的形状、纹理和尺寸，从而创建精确的 3D 模型。

在 Vision Pro 的发布之前，对于对象捕捉技术的实用性，我持有一定的怀疑态度。毕竟，在日常应用中，真的有那么多场景需要在手机上查看 3D 模型吗？

然而，随着 Vision Pro 的推出以及空间计算的兴起，3D 内容的重要性变得日益显著。在 visionOS 中，你可以简单的展示 3D 模型，也可以使用 ARKit 或 RealityKit 等工具增强现实物体的交互性和视觉效果。

在 WWDC24 上，苹果进一步推出了对象追踪（Object Tracking），为了实现精准的追踪效果，你需要使用 3D 模型来预训练机器学习模型。这些操作的实现，都离不开精确和高质量的 3D 模型作为基础。

对象捕捉技术的关键价值，在于它提供了一种快速且简便的方式来创建这些必需的3D模型。无论是开发者、设计师，还是普通用户，都可以轻松将现实世界中的物体转换成详尽的数字化模型，进而用于各种创新的计算和视觉项目。对象捕捉已经成为链接现实与增强现实世界的一座重要桥梁。

iOS 平台上，有一些应用程序可以实现对象捕捉，以下是几款流行的应用：

苹果官方出品的对象捕捉软件，使用 iPhone 的 LiDAR 传感器进行对象捕捉。

使用iOS设备的LiDAR传感器，提供高精度的3D对象扫描和捕捉功能。适用于创建3D模型和增强现实体验。

Polycam利用LiDAR技术进行高精度3D扫描和对象捕捉，适用于建筑、艺术和其他需要精细3D模型的领域。

Qlone是一款全功能的3D扫描和增强现实应用，允许用户使用iPhone或iPad捕捉对象并生成3D模型。