什么是Apple Intelligence?详解苹果的AI系统

发布于 2024-06-13 · Apple Intelligence是苹果公司开发的一款集成在 iPhone、iPad 和 Mac 平台上的个人智能系统,于2024年6月的WWDC大会上发布。该AI系统通过结合强大的生成模型...

在当今数字化时代,人工智能(AI)已成为推动技术进步与创新的核心力量。作为全球科技巨头之一,苹果公司始终在不断探索与创新,致力于提供更智能、更个性化的用户体验。在2024年的WWDC大会上,苹果公司揭晓了其最新力作——Apple Intelligence,这是一套全新的个人智能系统,旨在重塑用户与设备之间的交互方式。

Apple Intelligence

Apple Intelligence是什么

Apple Intelligence是苹果公司开发的一款个人智能系统,深度集成于 iPhone、iPad 和 Mac 平台,并在北京时间2024年6月11日的WWDC大会(苹果全球开发者大会)上正式发布。该AI系统将强大的生成模型与个人背景信息相结合,为用户提供有用且贴切的服务与体验。Apple Intelligence 的核心在于其先进的 AI 技术与对隐私的重视,它不仅能够理解用户的需求,还能预测用户的意图,在保护隐私的同时提供更加个性化的服务。

Apple Intelligence的核心功能

AI驱动的写作工具

写作工具是 Apple Intelligence 的一项系统级功能,可帮助用户在各类应用中重写、校对和总结文本。无论是撰写电子邮件、润色博客文章,还是整理课堂笔记,这些工具都能让用户在写作时更加从容自信。用户可以调整文本的语调、检查语法错误,甚至快速获取内容的简洁摘要。

苹果AI写作功能

Genmoji和Image Playground

Apple Intelligence 还为用户的图像与表情符号增添了乐趣和创造力。借助全新的 Image Playground,用户可以生成三种风格的趣味图像:动画、插图或草图。用户还能创建自定义表情符号,即"Genmoji",精准捕捉转瞬即逝的瞬间与独特的表达方式。此外,通过图像魔杖(Image Wand),用户可以将草图进一步转换成精致的图像。

苹果Genmoji

改进的照片和视频体验

照片应用也得到了增强,新增了自然语言搜索功能,用户可以轻松找到视频中的特定时刻。全新的清理工具能够去除背景中的干扰物,而不改变画面主体。通过"记忆"功能,用户只需简单描述,即可自动生成个性化的故事。

苹果AI照片处理

隐私和安全

Apple Intelligence 在 AI 领域树立了新的隐私标杆。首先,它拥有完全在设备上运行的小模型,可在本地处理用户请求。当更复杂的任务需要云处理时,苹果引入了全新的私有云计算功能,同时确保用户数据不会被保留或暴露。

Apple Intelligence的隐私

Siri的全面升级

Siri 借助 Apple Intelligence 获得了全面升级。如今,Siri 能够更好地理解用户、跟随用户的思路,并在多次请求之间保持上下文,甚至允许用户通过打字代替说话。Siri 还可以在各类应用中执行数百种全新操作,例如从朋友那里获取书籍推荐,或查询父母的航班状态。

Overhaul

ChatGPT集成

苹果公司还在其平台上整合了OpenAI旗下的ChatGPT。在用户允许的前提下,Siri 可以借助 ChatGPT 的专业知识来回答问题。ChatGPT 将在系统级写作工具中提供帮助,生成内容与图像。ChatGPT 用户还可以连接自己的账户,以访问付费服务。

苹果ChatGPT

Apple Intelligence的技术细节

Apple Intelligence 建立在苹果自研的一系列生成模型之上,包括设备端模型与服务器基础模型、用于图像生成的扩散模型以及编码模型。此外,Apple Intelligence 还能根据需要调用第三方模型(如 ChatGPT),以处理更复杂的请求。

Apple Intelligence的模型

设备端的模型

设备端模型拥有约 30 亿参数和 49K 的词汇量,采用低比特量化与分组查询注意力技术,以提升速度和效率。在 iPhone 15 Pro 上,该模型在每个提示 token 上实现了 0.6 毫秒的首 token 生成延迟,以及每秒 30 个 token 的生成速率。

服务器端的模型

服务器端模型拥有 100K 的词汇量,能够通过私有云计算处理更复杂的任务,同时确保隐私与安全。该模型采用推测性解码、上下文修剪等先进技术以提升性能,并建立在经过强化的 iOS 基础子集之上,通过强大的加密与安全启动流程保障用户数据隐私。

训练和优化

苹果的模型在精心策划的数据集上训练,这些数据不包含任何个人用户信息。训练数据包括授权数据、由 AppleBot 收集的公开数据以及合成数据。训练完成后,苹果采用拒绝采样微调、基于人类反馈的强化学习等新颖算法,以提升模型遵循指令的能力。

苹果还应用了一系列尖端技术,以确保在移动设备上实现最优性能与效率。通过分组查询注意力、共享嵌入表、低位 palletization 以及高效的键值缓存更新等方法,苹果成功打造出高度压缩的模型,使其在满足移动设备内存、功耗与性能限制的同时,仍能保持质量。

Apple Intelligence的系统

低秩适应(LoRA)

与 Google 的 Gemini Nano、Microsoft 的 Phi 等通用模型不同,苹果的模型通过一种名为"低秩适应"的技术,针对摘要、邮件回复、校对等日常活动进行了微调。该技术将小型神经网络模块插入预训练模型的各个层中,使模型在适应不同任务的同时保留通用知识。重要的是,这些适配器可以动态加载和交换,让基础模型能够针对当前任务进行专门处理。

如何使用Apple Intelligence

Apple Intelligence 面向用户免费提供,其测试版将于今年秋季作为 iOS 18、iPadOS 18 和 macOS Sequoia 的内置功能推出,初期仅支持英语(美国)。部分功能、软件平台以及其他语言支持将于明年陆续上线。Apple Intelligence 将仅支持 iPhone 15 Pro、iPhone 15 Pro Max,以及搭载 M1 或后续芯片的 iPad 和 Mac 设备,并需将 Siri 与设备语言设置为英语(美国)。

常见问题

Apple Intelligence基于什么大模型?
Apple Intelligence 基于苹果自研的一系列生成模型,包括设备端的3B小型模型与服务器端的更复杂模型,并在必要时调用 ChatGPT 等第三方模型。
Apple Intelligence国内可以用吗?
Apple Intelligence 计划于秋季推出 Beta 版本,初期仅提供美国英语,暂不在国区提供服务,后续可能扩展至中国市场。
Apple Intelligence如何保护用户隐私?
Apple Intelligence 使用在设备上运行的小模型在本地处理请求,并在需要云处理时采用 Private Cloud Compute,确保数据不被保留或暴露。
Siri在Apple Intelligence中有哪些改进?
如今的 Siri 能更好地理解用户、在多次请求间保持上下文、允许打字代替说话,并能跨应用执行数百种全新操作。

延伸阅读

0

相关文章

0 条评论

后参与评论

暂无评论,来抢沙发。