AI 与机器学习的新功能

为你的 App 注入个人智能。


Foundation Models 框架

Foundation Models 框架是一套原生 Swift API,可让你直接访问驱动 Apple 智能的同款设备端模型。现在,你可以使用任何语言模型,包括 Apple Foundation Models、Claude 和 Gemini 等云端模型,或任何其他符合 Language Model 协议的供应商提供的模型。

多模态提示词让你能够同时传递图像和文本,使你的 App 可以对视觉内容进行推理;OCR 和条形码读取器等 Vision 框架工具也可供你的模型直接调用,全部在设备端完成。Dynamic Profiles 让你能够动态切换模型、工具和指令,使你的 App 行为可在连续会话中灵活调整。

如果你的 App 在 App Store 的首次下载总量少于 200 万次,你就可以凭借无与伦比的隐私保护,在私有云计算上访问最新的 Apple Foundation Model。借助 Evaluations 框架,你可以在各种动态条件下验证 AI 功能是否正常运行,弥补单元测试难以覆盖的场景。


Core AI

全新框架 Core AI 直接内置在操作系统中,专为 Apple 芯片而设计,堪称将你自己的模型引入设备端运行的理想框架,另外还有配套的支持工具和技术助你一臂之力。通过内存安全的现代 Swift API,你能够直接在设备端载入、专门定制并运行 AI 模型,兼顾用户数据的隐私保护和你 App 的灵敏响应,完全消除对服务器的依赖和词元成本。模型会根据所运行的硬件自动完成优化,还支持提前编译,方便实现快速载入。精细的推理内存控制、无需拷贝的数据路径以及有状态的执行情况,共同为你带来在所有 Apple 平台上运行各类模型的强大性能,从紧凑型视觉模型到大规模生成式 AI,都不在话下。


MLX

MLX 是专为 Apple 芯片设计的开源数组框架,不仅速度更胜以往,而且试验、训练和微调大语言模型的能力更强。今年,这个框架新增了对 Metal 4 和 GPU 神经网络加速器的支持,实现大幅性能提升;现在还可以借助通过雷雳实现的 RDMA 通信,跨多台 Mac 扩展模型训练规模,方便你直接从桌面进行深度模型研究与微调。


Evaluations 框架

借助全新 Evaluations 框架带来的实用工具,你能够在你构建的智能功能触达用户之前测试提示词,并确认各项功能都在稳定运行。系统级评估直接集成在开发流程中,助你对自己打造的 AI 体验更有信心,这样你在发布时就能确保各项功能都会按预期运行。


各项功能可能有所变化。某些功能和服务仅适用于部分地区或语言;某些功能的提供情况可能会因当地的法律法规而异。