乐于分享
好东西不私藏

速览苹果WWDC,苹果终于要补AI作业了

速览苹果WWDC,苹果终于要补AI作业了

北京时间 6 月 9 日凌晨,苹果举行了WWDC 2026 开发者大会

瞬间从微微落后到终端的AI翘楚

一、Apple Intelligence 新架构

Apple Intelligence 的目标是将 AI 深度集成到用户日常使用的产品中,并结合个人上下文、常用 App 和隐私保护机制。

与 Google / Gemini 技术合作

苹果今年与 Google 展开深度合作,利用 Gemini 系列模型背后的技术,创建下一代 Apple Foundation Models。

这些模型被适配到两类环境:

  • • 在设备端运行。
  • • 在服务器端通过 Private Cloud Compute 运行。

系统级能力

新架构将 Apple Intelligence 扩展为系统级能力组合,主要包括:

  • • 个人上下文理解:结合照片、备忘录、邮件、信息等个人内容查找信息。
  • • Spotlight 语义索引:用于在设备内容中快速定位相关结果。
  • • 世界知识:访问网络上的最新信息,并通过 Private Cloud Compute 生成回答。
  • • App Actions:调用 App 中的工具完成任务,例如起草邮件、编辑和分享照片。
  • • 屏幕感知:根据用户当前使用的 App 和屏幕内容提供帮助。

这些能力会用于全新 Siri,也会进入用户常用的系统 App 和第三方 App。


二、Siri AI:新版 Siri

苹果将新版本 Siri 称为 Siri AI。

Siri AI 使用 Apple Intelligence 的新能力,包括:

  • • 个人上下文理解。
  • • App Actions。
  • • 屏幕感知。
  • • 图像理解。
  • • 世界知识。

屏幕感知和个人上下文

发布会展示了多个例子:

  • • 用户看到一张风景图,询问具体位置,Siri 根据画面识别地点。
  • • 用户询问朋友的新住址,Siri 在个人信息中查找相关地址。
  • • 用户要求规划路线,并在路线中加入朋友住处作为停靠点。
  • • 用户要求查找某次旅行中的照片,并将包含特定家人的照片加入共享相册。

新 Siri 的能力不只来自外部知识,也来自对屏幕内容和个人数据的理解

新增专用 Siri App,用于查看对话历史和继续已有对话。发布会中表示,对话历史会通过 iCloud 私密同步,因此用户可以在 iPhone、iPad 和 Mac 之间继续同一段 Siri 对话。


三、视觉智能与写作工具

  • • 视觉智能覆盖多个平台。iPhone 相机新增 Siri mode,可根据镜头内容回答问题或执行操作,例如识别食物营养信息、根据账单通过 Apple Cash 分账
  • • 同时支持iphone、mac、ipad、visionOS

写作工具和自动校对

写作工具被纳入 Siri 体验:

  • • 用户用自然语言描述需求,Siri 可以从零生成草稿。并
    自动校对支持系统范围内使用,包括大多数第三方 App。

四、图像生成与照片编辑

Image Playground图像生成模型

  • • 支持多种风格,包括写实风格。
  • • 生成模型运行在 Private Cloud Compute 上。
  • • 可基于照片图库中的人物生成图像。
  • • 可用自然语言改变图像风格或局部内容。
  • • 支持通过触控圈选图像中的对象并移动、缩放或修改。
  • • 支持选择不同输出尺寸,例如横向网站图片或纵向传单图片。
  • • 可用于信息背景、联系人海报、Live wallpapers 等。
  • • 开发者可通过 Image Playground API 使用这些能力。

Photos

照片App通过Apple Intelligence图像模型辅助编辑,同时尽量保留原始拍摄时刻。

  • • Cleanup 升级:移除画面干扰物时质量更高,复杂场景中的补全更自然。
  • • Extend:在改变画幅或校正倾斜地平线时扩展画面,为主体保留更多空间。
  • • Spatial Reframing:用户在照片拍摄后重新调整构图。

用户可以拖动照片,画面透视会像重新移动相机一样变化。


六、开发者相关 AI 工具


开发者方面,苹果提供 App Intents、Spotlight 索引、Foundation Models framework 和 Core AI framework
让开发者把 Apple Intelligence 或其他模型带入本地 App。Xcode coding assistant 也更新,支持 Gemini、custom skills,并可连接 Figma、GitHub 等工具

发布会收尾提到:

  • • 新系统版本的开发者 beta 在发布会当天开放。
  • • Public beta 将在下个月推出。
  • • 正式版本将于今年秋季面向用户发布。