Apple Intelligence

Foundation Models 프레임워크는 네이티브 Swift API로, 기기 및 비공개 클라우드 컴퓨팅*에서 실행되는 Apple Foundation Models뿐만 아니라, Language Model 프로토콜을 준수하는 Swift 패키지를 지원하는 모든 모델 제공업체를 직접 이용할 수 있도록 해 줍니다.

여기에서 멀티모달 프롬프트와 온디바이스 Vision 프레임워크 도구를 사용하면 앱이 텍스트와 함께 이미지에 대해 추론할 수 있으며, 동적 프로파일을 사용하면 한 연속 세션 내에서 모델, 도구, 지침을 교체할 수 있어 앱 인텔리전스가 실시간으로 적응 가능합니다. 그런 다음 Evaluations 프레임워크를 사용하여 AI 기능이 다양한 동적 조건에서 안정적으로 작동하는지 확인하세요.

App Intents 프레임워크는 수년간의 언어 모델 학습을 기반으로 구축된 인식 가능한 구조인 스키마를 통해 앱을 Apple Intelligence와 Siri AI에 연결합니다. 따라서 앱 콘텐츠를 쉽게 찾을 수 있고 더 적은 코드로 자연어를 통해 앱 기능을 사용할 수 있습니다.

엔티티 스키마는 개인적 맥락에 대한 이해를 위해 콘텐츠를 Spotlight 시맨틱 인덱스에 등록하며, 인텐트 스키마는 Siri의 언어 이해가 발전함에 따라 정의할 특정 문구나 코드 변경 없이 사용자가 자연스럽게 해당 콘텐츠에 대한 조치를 취할 수 있도록 해 줍니다. View Annotations API는 화면 내용 인지 기능으로 이를 더욱 확장하여, 뷰를 엔티티에 매핑해 사용자가 눈앞에 있는 항목을 대화식으로 참조하고 그에 대한 조치를 취할 수 있도록 해 줍니다.

Image Playground를 사용하면 사진 실사 등 거의 모든 스타일로 고품질 이미지를 생성할 수 있으며, 자연어 설명으로 자신의 사진을 변환하거나 설명 또는 터치를 사용해 이미지를 수정할 수 있습니다. 이미지는 비공개 클라우드 컴퓨팅에서 생성되므로 사진이 저장되거나 공유되지 않습니다. Image Playground API를 사용하면 이 새로운 이미지 생성 기능을 앱에서 바로 지원할 수 있습니다.

단축어는 Apple Intelligence를 활용하여 자연어 설명으로부터 자동화를 구성하므로, 사용자가 원하는 작업을 설명하기만 하면 앱 기능을 강력한 다단계 작업 흐름에 통합할 수 있습니다. 단축어 앱을 사용하면 시스템 및 앱 동작을 연결하여 작업을 자동화할 수 있습니다. 앱 인텐트를 도입하면 앱 동작과 엔티티가 해당 생태계의 일부가 되므로 이를 모델 사용 같은 기능과 함께 사용할 수 있습니다.

비주얼 인텔리전스는 iPhone의 카메라 앱, Mac과 iPad의 화면 속 콘텐츠, Apple Vision Pro의 실제 사물을 통해 눈앞에 있는 항목에 대한 정보를 검색하고 필요한 조치를 취할 수 있도록 지원합니다. 앱을 통합하면 시스템의 더 많은 영역에 걸쳐 앱이 자연스럽게 표시되므로 사용자가 필요한 순간 관련 콘텐츠를 보고 앱을 바로 실행하여 더 풍부한 세부 정보나 추가 결과를 확인할 수 있습니다.

시스템 전체에서 Siri를 활용해 글을 쓰고 편집할 수 있어 텍스트 작성, 재작성, 교정, 요약에 도움이 됩니다. 표준 UI 프레임워크를 사용하여 텍스트 필드를 렌더링하는 경우, 앱이 이 기능을 자동으로 지원합니다. 또는 앱에 맞춤형 텍스트 제어 항목이 있는 경우, API를 도입하여 이를 앱에 통합할 수 있습니다.

사용자가 앱을 사용하면서 순간의 감정을 표현하는 완벽한 이모지를 만들 수 있도록 앱을 향상해 보세요. 시스템 텍스트 제어 항목을 사용하면 젠모지가 앱에서 스티커로 자동 지원되며, 맞춤형 텍스트 엔진으로 젠모지를 렌더링할 수 있는 API도 있습니다.