苹果详解AI功能，库克表示“这是苹果的下一大步”

腾讯科技讯，6月11日，在WWDC 2024上，苹果高级副总裁克雷格·费德里吉介绍了苹果的AI系统——Apple Intelligent。

他表示，苹果AI会是真正的私人助理。它根据你的个人数据，你现在打开的页面等背景，调用多种Agent能力理解你的需求，并完成你的目标。比如看你邮件里的信息，了解你照片中对应的人，并给他制作一张专门的和你们的回忆相关的贺卡。

这不禁让人想到了微软前几天公布的回忆（Recall）功能，它引发了大家对于隐私的极大焦虑。但对于苹果来讲，这似乎不是什么问题。它提供了两种解决方案，首先是能在端内运行的大模型功能就会仅通过端侧AI运行，苹果只在端内收集信息而不会传送到云端。大多数AI功能都可以完全在端侧完成，这主要是苹果的超强芯片的功劳。深度集成的生成模型需要巨大的处理能力。

其次，如果是复杂到非要用云端模型的话，其云端模型都不可以不经你同意就存储相关信息。为了保证你的云端使用和信息安全，苹果还打造了私人云端计算。这些模型都会在他们使用 Apple Silicon 专门创建的服务器上运行，因此也拥有极强的隐私保护功能。在这里你的数据绝不会被长期储存，它只用于完成其云端的大模型计算步骤。在运作过程中，其加密方式将云锁定到您的手机。

Siri的新纪元

与之前传言的Siri已死不同，苹果官方给出的数据时，它现在一天内会收到高达15亿次的调用需求。

而新的Siri将更自然，更相关，更个人化。它会和系统进行更深入的整合。

这种结合首先出现在其出场方式哈桑。现在它被唤醒后出来的不再是那个气泡，而是一圈围绕屏幕的光晕。

而且它也终于可以记住上下文对话了。对同一件事你不用再反复提及，说代词就好。

对于那些不方便说话的场景，Siri现在支持打字了！比如说，当你感觉危险时，你可以用它悄悄报警了。

作为最基础的大模型能力，Siri现在可以作为一个知识库应用，但暂时只能回答你对苹果功能的疑问。

除了以上这些变化之外，其他的Siri升级都需要等到明年之后。但这些升级看起来都相当让人期待。

明年苹果将带来Siri的屏幕内感知功能，它可以看到屏幕上发生的事情。比如你的朋友向你发送了他们的地址，你只需说“将此地址添加到联系人卡片”，它就会执行此操作。

Siri 将成为一个可以采取行动的智能体，苹果称其为in-app action。它可以调用各种App内的功能，比如找到照片，调节照片。还可以跨应用使用。

另一个重要的升级是个人情景感知。Siri会更理解你的个人信息，通过了解你在手机上的个人背景，例如照片、消息、日历事件和文件等，通过这些更好的理解你的需求。比如当你说想去为你家人接机时，它可以同时调用邮件里，航班资讯等一系列信息，并调出地图告诉你怎么去想去的地方。

苹果表示，这次WWDC将会是Siri的新纪元

AI在应用端

邮箱功能升级

苹果邮箱现在加入了Rewrite 功能，能帮你智能生成文本的多个版本，并让你从中选择。你可以选择语气，格式。语气上可以让他更正式，更清晰。格式上你甚至可以吧邀请改成一首诗。它还会只改你选择的一部分，而非全部。

Apple intelligent还提供了总结，邮件的智能回复功能。现在他会自动总结你的邮件，你在邮箱里看到的就是最重要的总结。而且它还会把最近最重要的临期事件邮件自动放在最上方。

这项功能在短信里也一样，它会把那些亟待处理的问题放在最上面的地方。

图像能力的升级

Genmoji，可以在设备端用键盘创造最应景的Emojii。还可以在多个被选中选择。你还可以直接用照片形成Emoji，并将它放进你的对话里。

Image Playground，与过往复杂的文生图软件不同，它更私人化，会根据对话建议你生成图像的几个关键词，比如你最近对话的朋友。而且你也不用费心想Prompt，用几个词形成生成图像的预览。Image Playground 可在各种应用程序中使用，还有一个专用的 Image Playground 应用程序。还有一个供第三方开发人员使用的 API。

比如备忘录里的新增的Image Wand，就是通过接入Image Playgrund把草图直接转化成更完整图像。在这里你用Pencil画的草图加上一些关键词，就可以生成新的更完整的图像。

相册功能

首先苹果补齐了其他安卓手机都有的魔力笔刷功能，即用生成式AI更改图像。

它也利用AI提升了搜索能力，现在你可以用自然语言来找具体的照片。更进一步，你甚至可以在一个视频里找到特定的段落。

苹果还展示了一项非常有趣的延展功能：回忆相册。还可以摘取与你需求相关的照片，自动组合成一个影片，形成关于这件事所有回忆的相册视频。连音乐都不用你挑，而是AI是直接从Apple Music里选择的最搭配的音乐。

除此以外，Notes 和 Phone 应用程序也增加了新的 AI 录音和转录功能。

苹果还正式宣布了与ChatGPT的合作。Siri可以直接调用ChatGPT，你可以利用Siri和它对答。在应用中，也可以直接调出ChatGPT，Apple对模型和应用本身进行了很好的融合，让ChatGPT的产出，如大纲，文章能直接显示在应用中。用户可在iOS系统中免费直接调用ChatGPT，且不用创建账户。若用户已有账户，可以进行关联。ChatGPT的融合会在今年稍后上线。但ChatGPT不会是唯一一个和苹果合作的大模型公司，苹果表示，它准备整合多个AI外部模型，避免用户需要在不同App间切来切去。

Apple Intellengence 不仅开放了开发者ADK，让更多应用接入其能力。Xcode也融合了人工智能能力，帮助开发者更好的在Swift上开发App。

总之， AI这回在苹果的系统里，基本上做到了无处不在。