苹果的AI不是AI，这正是我最期待的地方

xuye004

苹果终于发布了自己“AI”，尽管它并不是 AI。


把 AI 解释为 “Apple Intelligence（苹果智能）”的缩写，总会让人回想起当年在上海，杰克马面对一龙马，将 AI 释为“Alibaba Intelligence（阿里智能）”的尴尬时刻。

过去这些年，当众多厂商都在迫不及待地给产品冠以各种“AI”之名时，苹果却从未这么做，它坚持使用“神经网络”、“机器学习”等词语，并表示“这样描述才更准确”——面对“人工智能”这一概念，苹果始终保持着极大的克制和谨慎。


是 AI，但又不是 AI。尽管来迟，但不妨碍所有人都将这次发布会视为苹果迈入 AI 时代的关键一步。发布后一周，苹果股价暴涨 10%。

除名字之外，苹果这套 AI 系统和其他大模型 AI 项目依然有着根本区别。苹果的模型参量要小得多，终极目标也不是要训练出“通用人工智能”。它最关键的任务，是将人们对 AI 的想象，从“洞悉一切的全知神”，变成“了解用户的贴身助手”。


Make智能手机智能again


WWDC24 上发布的苹果智能，从功能上可以分为三大部分：文字、图像和 Siri。

其中，文字和图像相关的功能，包括文章改写、总结、语法检查、生成图片、智能 P 图，都是大家很熟悉的生成式 AI 能力。因为这部分功能所使用的端侧模型相对较小，不难预见，它的效果很可能比不上 GPT-4o 等云端大模型。


苹果 AI 真正的革命性变化，在于 Siri。


AI 模型的支持，对 Siri 进行了一次“史诗级加强”。它理解语言的理能力增强了，并且可以跨 app 进行信息检索、调用功能。更重要的是，苹果提出了一个极为关键的概念——“个人语境”（personal context）。

简单来说，“个人语境”包括了你的 iPhone 及其他苹果设备上正在发生的一切。比如接下来的日历事项安排、最近拍过的照片、浏览过的网页记录、朋友发送给你的链接、文件……


苹果 AI 会利用这一切的私人数据，来构建一个“私人知识库”，用户则可以通过自然的对话交互，获取自己需要的信息，找到对应的手机功能。


比如在 AA 账单时，问“昨天朋友发给我的吃饭小票是多少钱？”；在订机票时问“我的护照号码是多少？”，Siri 会从相册里找出护照页的照片，并提取号码；

这是 AI 与智能手机结合的焦点，是让 AI 变得“真正有用”的关键钥匙。目前我们熟知的大模型大都是利用公共的语料数据进行训练，形成的知识也是一种“通识”，但普通人使用计算机和互联网时，大部分时间都是在创造和使用私人信息。


特别是智能手机已普及如此的今天，它几乎就是我们人生的“记忆库”，储存着大量的照片、通讯记录、偶尔灵光一闪写下的笔记……这些数据在堆积之后，逐渐变得越来越难整理，而 AI 则有可能能够帮我们重新挖掘、组织这些记忆。

基于“个人语境”来构建模型和私人知识库，以及如何将部分知识与通识模型进行结合，将会是未来苹果 AI 发展的关键。


一切为了“隐私”


技术上，苹果 AI 分为了三个大部分，对应三套模型。


首先是运行在手机上的“本地模型”，其次是运行在苹果全栈自研服务器上的“云端模型”，最后它还可以在系统层接入 OpenAI 的 GPT，后续还会接入更多第三方 AI 模型服务。


通过这种方式来搭建架构，是因为苹果需要谨慎而迫切解决的问题，是隐私。

根据目前苹果放出的技术资料，苹果 AI 首先会从系统层面收集各种信息，生成一个“语义目录”，也就是“个人语境”的基本数据单位，供模型进行理解。第三方 app 里的数据也有对应接口，经开发者适配后，可以实现类似效果。


这些数据会经过语言和图像两个模型进行理解，之后如果本地模型的算力不够，在用户需要的时候，系统则会整合这部分语义数据，发送到苹果的服务器上，通过云端更大的模型进行理解。


这一套“语义目录”包含了用户最敏感的个人数据，其中很多还是在后台默认采集，才能实现“Siri 了解了你”的神奇效果，过程中用户可能无法很明确地知道具体哪些数据被采集了。

所以，为了实现这部分功能的隐私安全，苹果作出了不少努力和牺牲。


苹果所部署的本地模型参量虽然比不上云端大模型的千亿万亿级，但也有约 30 亿的参量。所以只有搭载 A17 Pro 芯片的 iPhone 15 Pro 系列，以及 M1 以上芯片的 iPad 和 Mac 才支持这一功能，考虑到大部分用户都会主力通过 iPhone 使用苹果 AI，这可能会极大影响到苹果 AI 早期的冷启动。包括本地模型运行时的负载，可能也会影响手机的日常发热、续航表现。


而针对云端模型和服务器，苹果也拿出了最高级别的隐私安全实践。苹果承诺不会在模型服务器上储存任何用户信息；只有当用户主动请求时才会调用云端模型介入；云端模型所使用的芯片全都是苹果自研，没有任何第三方芯片；最后，苹果表示所有的隐私承诺将经过第三方验证。

直到这一步，用户所有的数据和 GPT 等第三方大模型，都是严格隔离的。针对 GPT 的接入，苹果则做了产品层面的明显区分，只有用户“主动输入”的信息，才会以 prompt 的形式发送到 GPT，且过程中苹果会进行二次确认，提醒用户“接下来将会跳转到 GPT”。


考虑到苹果已经在 iCloud 上储存了大量的用户数据，且多年来从未出现过大的泄漏安全事故，苹果在 AI 上采取的超高级别的隐私承诺似乎有点夸张。但事实证明一切还是有必要的，就在发布会后不久，Elon Musk 就针对苹果 AI 的隐私问题展开了攻击，暗示用户使用苹果 AI 就会把数据泄露给 OpenAI，尽管这一揣测还没有什么真实依据。


对苹果 AI 来说，隐私问题本身或许还能通过技术和产品设计解决，但由隐私问题所衍生出这一套分散的模型架构，才是真正的隐患和难题。

如果苹果 AI 一直高度依赖本地算力，考虑到模型规模和性能负载，它采集数据的颗粒度可能就会受到限制，停留在比较粗糙的层面，难以实现大模型那么顺畅的理解和交互。


目前在苹果 AI 的介绍页面里，整个“个人语境”还只能采集系统自带官方 app 的信息。第三方开发者要如何适配 AI？会不会积极适配 AI？还要打上不少个问号。


过去，苹果推出过多个系统内的便捷 API，比如能够在相册 app 里直接利用第三方 app 的编辑工具修图，以及“快捷指令”和“App Clips 小程序”，这些开发套件都没有得到第三方开发者的积极适配，因为接入这些便捷功能反而会影响 app 本身的活跃和留存。类似的问题，很可能也会在苹果 AI 上重演。

所以，苹果 AI 所面临的隐私问题，其实只是一连串难题的开始。与大模型“大力出奇迹”的发展方法论不同，想要将 AI 与手机结合，就必须重新设计整条技术链路。


从数据如何采集，过程中保证安全，训练拟合时如何追求效率和效果，到输出时如何转化为产品的功能……这和训练大模型，做一个“聊天机器人”完全不同。


谨慎地期待，耐心地等待


大模型 AI 落地的主要难题，在于“产品化”。


大模型诞生的过程，靠的是构建一个巨大的神经网络，这个神经网络是单一的，难以被 hack，更难拆分。


就像 GPT 目前严格来说依然只有 ChatGPT 这一个应用，大模型是封装好的单一系统，并不能像传统的计算机程序一样，所以就难以定义功能、产品化。

目前围绕 ChatGPT 所做的那些产品，基本都是通过 prompt 实现的，并不具备一个产品所需要的严谨性，它依然偶尔会返回错误的结果，致命的地方则在于这些错误无法被 debug。


苹果 AI 显然不是一个简单的“语言模型”。它其中有一部分功能是基于大模型的生成能力做的，但也有另外一部分功能明显更像是“加强版的机器学习”，比如 Siri 的搜索能力。只不过这些功能被装到了同一个篮子里，这个篮子叫“苹果智能”。

根据苹果放出的技术文档，目前苹果的云端模型，主要处理的还是文字、图像相关的“生成性”任务；而最关键的“个人语境”构建和 Siri 的优化，大部分依然是通过本地实现，它的“智能程度”可能很难得到保证。


这不只是苹果一家的问题。目前还没有任何一个 AI 企业或手机厂商，成功将一个私人的数据库，与大模型的公共知识库成功结合，创造出新的智能体，即想象中的完全了解用户的智能助手——解决这个问题的难度，比想象中大得多。

按照苹果公布的开发进度，至少在明年之前，我们都无法用上中文版的苹果 AI，很显然，大量的功能代码和模型训练工作都还没有完成。


过去一年我们用“涌现”这个词来形容大模型的能力发展之迅速，但真正到了与实用场景结合的时候，事情依然要复杂得多，需要更长的等待。


序幕拉开了，但表演还没有开始。

果壳AI组 出品

作者：Jesse

编辑：卧虫

封图和插图来源：苹果、Giphy

本文来自果壳，未经授权不得转载.