Apple 智能小组实验室

参加我们的线上活动，与 Apple 工程师和设计师一起深入探索 WWDC26。在这个以 Apple 智能为主题的活动中，你可以提出问题、获取建议，并实时关注围绕大会一周的相关重磅发布展开的精彩讨论。活动语言为英语。

章节

• 0:00:00 - 简介
• 0:01:43 - 要学习和应用 v27 的全新 API 和设计变更，哪些 Apple 资源最实用——是示例项目、迁移指南、设计套件还是文档？
• 0:03:09 - 我的 App 不适配任何预定义的架构类型。 我应该使用最接近的相关类型，还是暂时不支持架构？ 我的时间跟踪 App 包含计时器和日历类型，但它们与预定义的架构类型并不完全契合。
• 0:07:08 - 我 App 的核心实体和操作与任何预定义的架构域均不匹配。 现在将它们接入智能体 Siri 并为平台未来的演进做好准备的最佳方法是什么？
• 0:08:18 - 第三方 App 无法通过任何 API 来直接调用另一个 App 的意图 — Siri/快捷指令充当编排器。 App 能否充当自身的编排器，还是说跨 App 的操作必须通过 Siri/快捷指令进行路由？
• 0:10:23 - 借助 iOS 27 中的全新 Siri，我的第三方 App 能不能参与到多轮对话中，还是说交互范围只限于通过 App Intents 公开的离散操作和实体？
• 0:12:08 - 在同一个 App 中，将不匹配架构的 App 实体/意图与匹配了不同域中不同架构的实体/意图混合使用，是否可行？
• 0:13:26 - 在一次后台唤醒期间，Foundation Models 是否有实际的时间或工作预算限制？ 如果没有设定固定数值，App 应该如何安全地对任务进行分块处理？
• 0:14:47 - 哪些错误类型/代码表示 Foundation Models 节流、系统繁忙、热压力、配额耗尽或模型不可用？ 哪些错误是可重试的，哪些是终止性的？
• 0:16:01 - 如何避免 LanguageModelSession.GenerationError.guardrailViolation？ 我经常在提示词没有任何明显问题的情况下，收到违反安全护栏的错误。
• 0:17:38 - 在 iOS 27 中，Foundation Models 能否对视频进行推理或使用视频模型，还是说多模态输入仅限于静态图像？
• 0:21:47 - App Intent 架构是否会让你的意图在与 Siri 交互时获得某种“优势”，还是说任何意图/实体都能以相同的方式被系统发现？ (值得注意的是，目前并没有财务相关架构。)
• 0:26:00 - 可以在我的 App 中使用图乐园生成照片级逼真的图像吗？
• 0:27:24 - 我对 IndexedEntity 和已定义的实体 (如 AppSchema.BooksEntity) 之间的区别感到困惑。 是否所有不属于图书、日历日程等类型的实体，都应该使用 IndexedEntity？
• 0:30:15 - 除了产品评估之外，Apple 是否打算让 Evaluations 框架也能用于学术研究？比如，用于收集指标，并为同行评审的研究提供证据支持？
• 0:33:11 - Siri 在连接 CarPlay 车载后能否理解屏幕上的上下文？它是否也能在 CarPlay 车载上执行屏幕操作 (比如“播放第 2 行第 1 列的歌曲”)？
• 0:35:40 - 我们能否在 HomePod/audioOS 上使用 App Intents？ 目前还没有 Beta 版。
• 0:36:14 - watchOS 对 App Intents 的响应能和 iOS 做到完全一一对应吗？
• 0:38:31 - 图乐园现在是否需要互联网连接才能使用 PCC？或者它能否无缝回退到之前的设备端模型？
• 0:38:59 - 对于 Apple 智能方面的更新，你们每个人最心动的功能都是什么？
• 0:45:38 - 为什么要选择硬编码的架构，而不是像 GPT 或 Claude 那样的动态方法——例如，通过 Markdown 描述技能并引用 App 实体？ 那不是更灵活吗？
• 0:49:22 - Evaluations 框架是否提供了一种方式来确认我的工具是否被调用？
• 0:51:01 - 在设备端模型和基于服务器的大型模型之间传递上下文时，Apple 智能框架是如何缓解语义熵的？
• 0:52:54 - 是否需要将 Evaluations 框架与 Foundation Models 一起使用？
• 0:53:53 - 在属于同一开发者且共享 App 组的情况下，某个 App 的 Foundation Models 会话是否可以通过 SpotlightSearchTool 检索另一个 App 的 IndexedEntity 内容，还是说这种检索被隔离在数据提供方 App 的沙盒内。
• 0:55:33 - 架构绑定的实体是否可以互换——例如，能否通过 Transferable 让一个 App 的 FileEntity 变成 PhotoEntity，反之亦然？
• 0:58:01 - 我管理一个联系人列表；与之最接近但并不完全匹配的是 .messages.messagePerson 架构。 这样可以接入新版 Siri 吗？
• 1:00:09 - 虽然 Foundation Models 现已支持图像输入，但词元上限仍为 4096。为了让模型发挥最佳效果，对于提示词或指令等其他输入有没有什么限制？

资源

• • 高清视频
  • 标清视频