北京时间 6 月 9 日凌晨,苹果举行了WWDC 2026 开发者大会
瞬间从微微落后到终端的AI翘楚
一、Apple Intelligence 新架构
Apple Intelligence 的目标是将 AI 深度集成到用户日常使用的产品中,并结合个人上下文、常用 App 和隐私保护机制。
与 Google / Gemini 技术合作
苹果今年与 Google 展开深度合作,利用 Gemini 系列模型背后的技术,创建下一代 Apple Foundation Models。
这些模型被适配到两类环境:
• 在设备端运行。 • 在服务器端通过 Private Cloud Compute 运行。
系统级能力
新架构将 Apple Intelligence 扩展为系统级能力组合,主要包括:
• 个人上下文理解:结合照片、备忘录、邮件、信息等个人内容查找信息。 • Spotlight 语义索引:用于在设备内容中快速定位相关结果。 • 世界知识:访问网络上的最新信息,并通过 Private Cloud Compute 生成回答。 • App Actions:调用 App 中的工具完成任务,例如起草邮件、编辑和分享照片。 • 屏幕感知:根据用户当前使用的 App 和屏幕内容提供帮助。
这些能力会用于全新 Siri,也会进入用户常用的系统 App 和第三方 App。
二、Siri AI:新版 Siri
苹果将新版本 Siri 称为 Siri AI。
Siri AI 使用 Apple Intelligence 的新能力,包括:
• 个人上下文理解。 • App Actions。 • 屏幕感知。 • 图像理解。 • 世界知识。
屏幕感知和个人上下文

发布会展示了多个例子:
• 用户看到一张风景图,询问具体位置,Siri 根据画面识别地点。 • 用户询问朋友的新住址,Siri 在个人信息中查找相关地址。 • 用户要求规划路线,并在路线中加入朋友住处作为停靠点。 • 用户要求查找某次旅行中的照片,并将包含特定家人的照片加入共享相册。
新 Siri 的能力不只来自外部知识,也来自对屏幕内容和个人数据的理解
新增专用 Siri App,用于查看对话历史和继续已有对话。发布会中表示,对话历史会通过 iCloud 私密同步,因此用户可以在 iPhone、iPad 和 Mac 之间继续同一段 Siri 对话。
三、视觉智能与写作工具

• 视觉智能覆盖多个平台。iPhone 相机新增 Siri mode,可根据镜头内容回答问题或执行操作,例如识别食物营养信息、根据账单通过 Apple Cash 分账 • 同时支持iphone、mac、ipad、visionOS
写作工具和自动校对
写作工具被纳入 Siri 体验:
• 用户用自然语言描述需求,Siri 可以从零生成草稿。并 自动校对支持系统范围内使用,包括大多数第三方 App。
四、图像生成与照片编辑

Image Playground图像生成模型
• 支持多种风格,包括写实风格。 • 生成模型运行在 Private Cloud Compute 上。 • 可基于照片图库中的人物生成图像。 • 可用自然语言改变图像风格或局部内容。 • 支持通过触控圈选图像中的对象并移动、缩放或修改。 • 支持选择不同输出尺寸,例如横向网站图片或纵向传单图片。 • 可用于信息背景、联系人海报、Live wallpapers 等。 • 开发者可通过 Image Playground API 使用这些能力。
Photos
照片App通过Apple Intelligence图像模型辅助编辑,同时尽量保留原始拍摄时刻。
• Cleanup 升级:移除画面干扰物时质量更高,复杂场景中的补全更自然。 • Extend:在改变画幅或校正倾斜地平线时扩展画面,为主体保留更多空间。 • Spatial Reframing:用户在照片拍摄后重新调整构图。
用户可以拖动照片,画面透视会像重新移动相机一样变化。
六、开发者相关 AI 工具

开发者方面,苹果提供 App Intents、Spotlight 索引、Foundation Models framework 和 Core AI framework
让开发者把 Apple Intelligence 或其他模型带入本地 App。Xcode coding assistant 也更新,支持 Gemini、custom skills,并可连接 Figma、GitHub 等工具
发布会收尾提到:
• 新系统版本的开发者 beta 在发布会当天开放。 • Public beta 将在下个月推出。 • 正式版本将于今年秋季面向用户发布。
夜雨聆风