Apple Intelligence 그룹 랩

Apple 엔지니어 및 디자이너들과 함께 WWDC26를 심층적으로 소개하는 세션에 온라인으로 함께하세요. 질문을 하고, 조언을 얻으며, 일주일간의 Apple Intelligence 관련 주요 발표 내용들에 대한 토론을 확인할 수 있습니다. 영어로 진행됩니다.

챕터

• 0:00:00 - 서론
• 0:01:43 - 새로운 v27 API와 예시 프로젝트, 마이그레이션 가이드, 디자인 키트 또는 문서 등의 디자인 변경 사항을 학습하고 적용하는 데 가장 유용한 Apple 리소스는 무엇인가요?
• 0:03:09 - 제 앱은 미리 정의된 스키마 타입에 해당하지 않습니다. 가장 유사한 타입을 사용해야 할까요, 아니면 당분간 스키마를 지원하지 않는 게 좋을까요? 제 시간 추적 앱의 타이머와 달력 타입은 완전히 맞지 않습니다.
• 0:07:08 - 제 앱의 핵심 엔티티와 동작이 미리 정의된 스키마 도메인에 매핑되지 않습니다. 이러한 핵심 엔티티와 동작을 오늘날 에이전틱 Siri에 연결하고 플랫폼이 발전함에 따라 대비하는 최선의 방법은 무엇인가요?
• 0:08:18 - 타사 앱이 다른 앱의 인텐트를 직접 호출하는 API는 없고 Siri/단축어가 오케스트레이터 역할을 합니다. 앱이 자체적으로 오케스트레이터 역할을 할 수 있나요, 아니면 앱 간 작업은 반드시 Siri/단축어를 통해 라우팅해야 하나요?
• 0:10:23 - iOS 27의 새로운 Siri에서 타사 앱은 다중 턴 대화에 참여할 수 있나요? 아니면 앱 인텐트를 통해 노출되는 개별 동작과 엔티티로만 제한되나요?
• 0:12:08 - 동일한 앱에서 스키마가 없는 앱 엔티티/인텐트를 다른 도메인의 다른 스키마에 맞는 앱 엔티티/인텐트와 조합해도 괜찮나요?
• 0:13:26 - 한 번의 백그라운드 깨우기 기간 동안 실질적으로 Foundation Models에 대해 작업할 시간/예산이 있나요? 고정적인 시간/예산이 없다면 앱에서는 어떻게 작업을 안전하게 청크 단위로 처리해야 하나요?
• 0:14:47 - 어떤 오류 유형/코드가 Foundation Models의 요청 제한, 시스템 과부하, 열압, 할당량 소진 또는 모델 이용 불가를 나타내나요? 재시도 가능한 오류와 복구 불가능한 오류는 무엇인가요?
• 0:16:01 - LanguageModelSession.GenerationError.guardrailViolation을 피하려면 어떻게 하나요? 이렇다할 문제는 없지만 프롬프트에 대한 가드레일 위반 오류가 자주 발생합니다.
• 0:17:38 - iOS 27에서 Foundation Models가 비디오를 기반으로 추론하거나 비디오 모델을 사용할 수 있나요? 아니면 멀티모달 입력이 정적 이미지로만 제한되나요?
• 0:21:47 - 앱 인텐트 스키마가 Siri에서 인텐트에 ‘우위’를 제공하나요, 아니면 모든 인텐트/엔티티가 같은 방식으로 인식될 수 있나요? (참고로, 금융 스키마는 없습니다.)
• 0:26:00 - Image Playground을 사용하여 앱에서 사진처럼 생생한 이미지를 생성할 수 있나요?
• 0:27:24 - IndexedEntity와 AppSchema.BooksEntity 처럼 정의된 엔티티 간 어떠한 차이점이 있는지 혼란스럽습니다. IndexedEntity는 책, 캘린더 이벤트 등과 같은 항목이 아닌 모든 것에 사용해야 하나요?
• 0:30:15 - Apple은 Evaluations 프레임워크가 제품 평가뿐만 아니라 지표 수집과 동료 검토 연구를 위한 증거 생성 같은 학술 연구에도 활용될 것으로 예상하나요?
• 0:33:11 - Siri가 CarPlay에 연결되어 있을 때 화면의 맥락을 이해하고 CarPlay에서도 ‘2행 1열의 노래 재생’과 같은 화면 내 동작을 수행할 수 있나요?
• 0:35:40 - HomePod/ audioOS에서 앱 인텐트를 사용할 수 있나요? 현재 베타 버전은 없습니다.
• 0:36:14 - watchOS에서 앱 인텐트에 대한 응답이 iOS와 완전히 동일할 것으로 기대할 수 있을까요?
• 0:38:31 - 이제 Image Playground에서 PCC를 사용하려면 인터넷을 연결해야 하나요? 아니면 이전 온디바이스 모델로 자동 전환되나요?
• 0:38:59 - Apple Intelligence 업데이트에 대해 각자 가장 기대되는 점은 무엇인가요?
• 0:45:38 - 앱 엔티티를 참조하는 Markdown 기반의 기술처럼 GPT나 Claude와 같은 동적 방식 대신 하드 코딩된 스키마를 선택한 이유는 무엇인가요? 이 방식이 더 유연하지 않나요?
• 0:49:22 - Evaluations 프레임워크에서 도구가 호출되는지 확인할 수 있는 방법이 있나요?
• 0:51:01 - Apple Intelligence 프레임워크는 온디바이스 및 대규모 서버 기반 모델 간에 맥락을 전달할 때 시맨틱 엔트로피를 어떻게 완화하나요?
• 0:52:54 - Foundation Models와 함께 Evaluations 프레임워크를 사용해야 하나요?
• 0:53:53 - 동일한 개발자이고 앱 그룹을 공유하는 경우, 앱의 Foundation Models 세션이 SpotlightSearchTool을 통해 다른 앱의 IndexedEntity 콘텐츠를 가져올 수 있나요? 아니면 검색이 원래 앱의 샌드박스로 제한되나요?
• 0:55:33 - 스키마에 연결된 엔티티들은 서로 호환 가능한가요? 앱의 FileEntity가 PhotoEntity로, 또는 그 반대로 Transferable을 통해 변환될 수 있나요?
• 0:58:01 - 저는 연락처 목록을 관리하고 있는데, .messages.messagePerson 스키마가 거의 일치하지만 완벽하게 맞지는 않습니다. 새로운 Siri에 참여해도 괜찮나요?
• 1:00:09 - Foundation Models에 이미지 입력이 추가되어도 토큰 한도는 여전히 4096입니다. 모델이 최적의 동작을 수행하는 데 프롬프트나 지시 같은 다른 입력에 제약이 있나요?

리소스

• • HD 비디오
  • SD 비디오