框架

ARKit

结合运用 iOS 设备摄像头和运动功能，在你的 App 或游戏中提供增强现实体验。

最新英文文章

ARKit


概览

通过设备摄像头为实时视图增添 2D 或 3D 元素，让这些元素看似存在于真实世界中一般，这就是“增强现实 (AR)”所指的用户体验。ARKit 结合运用设备运动跟踪、摄像头场景捕捉、高级场景处理和显示便捷性，简化了打造 AR 体验的工作。你可以使用这些技术，通过 iOS 设备的前置或后置摄像头打造各种不同的增强现实体验。

相关主题

基础知识

选择要增强的摄像头源
通过前置或后置摄像头对用户的环境进行增强。
验证设备支持和用户权限
检查你的 App 是否能使用 ARKit 并在运行时尊重用户隐私。
管理会话生命周期并跟踪质量
让用户能够清楚了解当前会话状态并在中断后恢复。
class ARSession (英文)
用于控制增强现实体验的主要对象。
class ARConfiguration (英文)
这个对象用于定义给定时间在会话中启用的特定框架功能。
class ARAnchor (英文)
关注对象在物理环境中的位置和方向。

相机

获取用户 iOS 设备的相关细节，例如它在 3D 空间中的位置和方向，以及相机的视频数据和曝光度。
使用场景深度打造雾效 (英文)
对物理环境应用虚拟雾。
使用场景深度呈现点云 (英文)
使用场景的深度数据在现实世界中布点，以呈现物理环境的形状。
class ARFrame (英文)
会话期间捕捉的、带有位置跟踪信息的视频图像。
class ARCamera (英文)
给定帧中的摄像头位置和影像特征信息。

AR 快速查看

在 App 或网站中增添 AR 体验的最简单方法。
利用 AR 快速查看预览模型
显示用户能够移动、缩放并与他人共享的模型或场景。
在 AR 快速查看和 RealityKit 中添加视觉效果
利用建模策略，让 AR 体验在外观和性能之间取得平衡。
在 AR 快速查看中添加 Apple Pay 按钮或自定操作
提供一个横幅，让用户可在 AR 体验中轻点这个横幅来进行购买或完成自定操作。
class ARQuickLookPreviewItem (英文)
用于自定 AR 快速查看体验的对象。
增强现实的 USDZ 方案 (英文)
使用 USD 方案、图元和元数据向你的 3D 内容中添加增强现实功能。

显示

利用能够自动完成渲染处理的视图，打造功能全面的 AR 体验。
class ARView (英文)
这个视图用于通过 RealityKit 呈现增强现实体验。
class ARSCNView (英文)
这个视图让你可以利用 SceneKit 呈现增强现实体验。
class ARSKView (英文)
这个视图让你可以利用 SpriteKit 呈现 AR 体验。

现实场景跟踪

现实场景跟踪 (英文)
通过跟踪表面、图像、物体、人物或用户面孔，打造后置摄像头增强现实体验。

地理跟踪

在增强现实中跟踪地理位置 (英文)
跟踪关注的特定地理区域并在增强现实体验中对这些区域进行渲染。
class ARGeoTrackingConfiguration (英文)
这个配置用于跟踪地理位置。
class ARGeoAnchor (英文)
这个对象用于跟踪地理位置。

面部跟踪

跟踪出现在前置摄像头馈送中的面孔。
跟踪和呈现面孔 (英文)
检测前置摄像头增强现实体验中的面孔，叠加匹配的虚拟内容，并实时生成面部表情动画。
结合使用用户面部跟踪和现实场景跟踪 (英文)
在使用后置摄像头显示增强现实体验的 App 中跟踪用户面孔。
class ARFaceTrackingConfiguration (英文)
只希望用设备前置摄像头跟踪面部时使用的配置。
class ARFaceAnchor (英文)
ARKit 在前置摄像头馈送中检测到的面部姿态、拓扑和表情信息。

人物

对 ARKit 在相机视频流中检测到的人物做出响应。
使用人物遮挡虚拟内容 (英文)
使用 ARKit 在相机视频流中感知的人物来遮挡 App 中的虚拟内容。
在 3D 中捕捉肢体运动 (英文)
跟踪物理环境中的人物，并通过让虚拟人物做出相同的肢体运动来呈现他们的动作。
制作动作捕捉模型 (英文)
配置自定 3D 模型，以便 ARKit 的人体跟踪功能控制它们。
验证动作捕捉模型 (英文)
验证你的人物模型是不是与 ARKit 的动作捕捉要求相符。
class ARBodyTrackingConfiguration (英文)
用于在 3D 空间中跟踪人物动作的配置。
class ARBodyAnchor (英文)
这个对象用于在 3D 空间中跟踪 ARKit 在相机视频流中识别的肢体运动。
class ARBody2D (英文)
ARKit 在相机视频流中识别的人物的屏幕空间呈现。

图像跟踪

识别物理环境中的图像，并跟踪它们的位置和方向。
跟踪和改变图像 (英文)
利用用户环境中找到的矩形形状创建图像，并对它们的外观进行增补。
在增强现实体验中检测图像 (英文)
对用户环境中的已知 2D 图像做出响应，并使用它们的位置放置增强现实内容。
class ARReferenceImage (英文)
用于描述希望 ARKit 在物理环境中检测的图像。
class ARImageAnchor (英文)
现实场景跟踪增强现实会话中所检测到图像的位置和方向信息。
class ARImageTrackingConfiguration (英文)
只希望用设备后置摄像头馈送跟踪已知图像时使用的配置。

物体检测

通过先使用 App 扫描，在运行时识别已知的对象。
扫描和检测 3D 对象 (英文)
记录现实世界中物体的空间特征，然后使用结果在用户环境中查找这些物体并触发增强现实内容。
class ARReferenceObject (英文)
用于描述希望 ARKit 在增强现实会话期间从物理环境中查找的现实物体。
class ARObjectAnchor (英文)
现实场景跟踪增强现实会话中，所检测到现实 3D 物体的位置和方向信息。
class ARObjectScanningConfiguration (英文)
这个配置用于收集物理环境中现实物体的高保真空间数据。

方向跟踪

class AROrientationTrackingConfiguration (英文)
只希望用设备后置摄像头跟踪设备方向时使用的配置。

位置跟踪

class ARPositionalTrackingConfiguration (英文)
只希望跟踪设备在空间中的位置时使用的配置。

渲染效果

为增强现实体验增加逼真的反射效果 (英文)
使用 ARKit 根据摄像头影像生成环境探测纹理并渲染反射虚拟物体。
class AREnvironmentProbeAnchor (英文)
这个对象用于在现实场景跟踪增强现实会话中为特定区域空间提供环境光照信息。
class ARLightEstimate (英文)
与增强现实会话中所捕捉视频帧关联的预估场景光照信息。
class ARDirectionalLightEstimate (英文)
与面部跟踪 AR 会话中所捕捉视频帧关联的预估环境光照信息。

多用户

与其他设备通信，打造共享的 AR 体验。
打造协同会话 (英文)
利用对等多用户策略，让附近的设备共享 AR 体验。
打造多用户增强现实体验 (英文)
利用主从多用户策略，让附近的设备共享 AR 体验。
SwiftShot：打造增强现实类游戏 (英文)
观看 Apple 如何为 WWDC18 构建特色演示，并从中获取如何使用 ARKit、SceneKit 和 Swift 打造属于你的多人游戏的相关提示。
class ARSession.CollaborationData (英文)
这个对象用于存放用户收集的物理环境相关信息。
class ARParticipantAnchor (英文)
在多用户 AR 体验中代表另一位用户的锚点。

音频

利用音频打造沉浸式增强现实体验 (英文)
借助声音效果和环境声音层次，打造富有吸引力的 AR 体验。

文本

通过显示锚定的文本，为 AR 体验添加注释。
在增强现实体验中为物体创建屏幕注释 (英文)
利用在屏幕上给现实和虚拟物体贴上虚拟便签，为 AR 体验添加注释。
识别和标记任意对象 (英文)
利用自定光学识别算法，创建用于跟踪相机视频流中所识别对象的锚点。

自定显示

通过实现自己的渲染器，打造功能全面的增强现实体验。
在自定渲染器中实现人物遮挡效果 (英文)
利用蒙版生成器，于 ARkit 在相机视频流中识别到人物的位置上遮挡 App 的虚拟内容。
通过 Metal 呈现增强现实体验 (英文)
控制 App 如何基于相机视频流来渲染虚拟内容。
class ARMatteGenerator (英文)
一个用于创建蒙版纹理的对象，这些蒙版纹理用来以 ARKit 在相机视频流中识别的人物遮挡 App 的虚拟内容。

类

class ARAppClipCodeAnchor (英文) Beta