ARKit 3に向けた準備

ARKit 3は、これまでにない大きな進歩を遂げました。「ピープルオクルージョン」によって人の前や背後に自然にARコンテンツを表示したり、同時に最大3人の顔をトラッキングしたり、共同セッションをサポートすることができます。また、ARKitの新しい人物認識機能を活用して、Appに人の動きを組み込むことができるようになりました。

ピープルオクルージョン

ARコンテンツがリアルワールドに実在する人の前や背後を通り過ぎるといったことを実現できるようになりました。これにより、AR体験がより臨場感あふれるものになり、ほとんどすべての環境でグリーンスクリーンのような効果を得ることも可能になりました。

モーションキャプチャ

人の動きを1つのカメラを使ってリアルタイムにキャプチャできます。体の位置と動きを関節と骨の連続体として認識することで、動きと姿勢をAR体験の入力として使用し、ARの中心に人物を配置することができます。

フロントカメラとバックカメラの同時使用

フロントカメラとバックカメラでフェイストラッキングとワールドトラッキングを同時に使うことで、新しい可能性が広がります。たとえば、顔だけを使用して、バックカメラビューのARコンテンツを操作することが可能です。

複数のフェイストラッキング

iPhone X、iPhone XS、iPhone XS Max、iPhone XR、およびiPad Proに搭載されているTrueDepthカメラを使用することで、ARKitのフェイストラッキングで同時に最大3人の顔をトラッキングできるようになりました。これにより、ミー文字やSnapchatのような、フロントカメラを利用した体験をさらにパワーアップさせることができます。

共同セッション

複数の人による共同セッションを通して、共同でワールドマップを作成することができます。これにより、AR体験の構築期間が短縮され、ユーザーはマルチプレイヤーゲームのような共有AR体験を簡単に得ることができます。

その他の改善点

最大100枚の画像を一度に検出して、画像の物理サイズを自動的に測定することができます。複雑な環境におけるオブジェクト認識能力が向上したため、3Dオブジェクトをより確実に検出できるようになりました。また、機械学習を使用することで、環境内の平面検出がこれまで以上に高速になりました。