ARKit 6에는 4K 비디오가 도입되어 AR 체험을 하면서 놀라운 고해상도 비디오를 캡처할 수 있으므로 전문적인 비디오 편집, 영화 제작, 소셜 미디어 앱 등에 제격입니다. 비디오 및 캡처 기능에 HDR 비디오 및 고해상도 배경 이미지 캡처 지원이 추가되었습니다. ARKit 6에서는 몬트리올, 시드니, 싱가포르, 도쿄와 같은 새로운 도시에 위치 앵커를 사용할 수 있으며, 모션 캡처 기능도 향상되었습니다.
ARKit 6에는 ARKit 세션 중에 후면 카메라를 사용하여 4K 비디오 피드를 캡처할 수 있는 옵션이 도입되었습니다. 4K 비디오는 가상 콘텐츠와 실제 콘텐츠를 통합하여 비디오를 제작하는 앱(예: 소셜 미디어, 전문적인 비디오 편집 및 영화 제작 앱)에 적합합니다.
iPhone 11 이후 모델 또는 iPad Pro(5세대)가 필요합니다.
이 API에서는 LiDAR 스캐너에 내장된 고급 장면 인식 기능을 통해 주변 환경에 대한 픽셀당 심도 정보를 사용할 수 있습니다. 이 심도 정보를 Scene Geometry에서 생성된 3D 메시 데이터와 결합하면 가상 물체를 즉각적으로 배치하고 실제 환경에 원활하게 혼합하여 가상의 사물 오클루전을 더 사실적으로 구현할 수 있습니다. 이를 통해 더 정밀한 측정 및 사용자 환경에 효과 적용 등 앱 내에서 새로운 기능을 구현할 수 있습니다.
LiDAR 스캐너는 놀랍도록 빠른 평면 감지가 가능하므로 AR 물체를 스캔 없이 현실 세계에 즉각적으로 배치할 수 있습니다. ARKit으로 빌드한 모든 앱이라면 별도의 코드 변경 없이 iPhone 12 Pro, iPhone 12 Pro Max, iPad Pro에서 즉각적인 AR 배치 기능이 자동으로 활성화됩니다.
Depth API 및 즉각적인 AR은 LiDAR 스캐너가 장착된 기기(iPad Pro 11(2세대), iPad Pro 12.9(4세대), iPhone 12 Pro, iPhone 12 Pro Max)에만 제공됩니다.
한 대의 카메라로 사람의 움직임을 실시간으로 캡처합니다. 몸의 위치와 움직임을 일련의 관절과 뼈로 파악하여 AR 경험에 동작과 자세를 입력하면서 AR의 중심에 인물을 배치할 수 있습니다. ARKit으로 빌드한 모든 앱이라면 별도의 코드 변경 없이 iPhone 12, iPhone 12 Pro, iPad Pro에서 향상된 높이 추정 기능을 선보입니다.
전면 카메라와 후면 카메라로 얼굴과 공간을 동시에 추적하여 새로운 가능성을 열어보십시오. 예를 들어 사용자는 자신의 얼굴만 사용해 후면 카메라 뷰에 보이는 AR 콘텐츠와 상호 작용할 수 있습니다.
ARKit 6를 사용하여 ARKit 세션 중에 고해상도 배경 이미지를 캡처할 수 있습니다. 이 기능을 사용하여 가상의 물체를 고품질로 재구성할 수 있으며, 최종 이미지의 품질을 극대화하면서 사용자에게 완벽한 사진을 제공하고자 하는 사진 앱에도 안성맞춤입니다. 또한 ARKit 6에는 HDR 비디오 지원이 시작되었으며, 모든 ARKit 프레임에 노출 및 화이트 밸런스와 같은 EXIF 태그가 추가되었습니다. 이제 ARKit 세션 중에 카메라의 노출 설정, 화이트 밸런스 및 초점을 직접 제어할 수 있습니다.
Scene Geometry로 바닥, 벽, 천장, 창문, 문, 좌석을 식별하는 레이블을 사용하여 공간의 토폴로지 맵을 만들 수 있습니다. 이처럼 실제 세계에 대한 심층적 이해를 통해 가상 물체에 대해 사물 오클루전 및 실제 물리적 요소를 구현하고 AR 작업 흐름을 구동하는 데 필요한 정보를 더 많이 얻을 수 있습니다.
AR 콘텐츠를 현실 세계에 있는 인물의 앞이나 뒤에 사실적으로 표시하면서 AR 경험을 더 몰입감 있게 만드는 동시에 대부분의 환경에서 '그린' 화면 스타일 효과를 적용할 수 있습니다. ARKit으로 빌드한 모든 앱이라면 별도의 코드 변경 없이 iPhone 12, iPhone 12 Pro, iPad Pro에서 깊이 추정 기능을 선보입니다.
이제 모션 캡처의 전반적인 신체 자세 감지 기능이 향상되어 왼쪽 및 오른쪽 귀 추적이 가능합니다. 한 번에 최대 100개의 이미지를 인식하고 해당 이미지에 있는 대상체의 실제 크기를 자동으로 추정합니다. 복잡한 환경에 있는 대상체의 인식이 개선되면서 3D 사물 인식이 더 강력해졌습니다.