备受瞩目的全球开发者大会落下帷幕,苹果公司在此次大会上推出的一系列AI新功能成为焦点。然而,对于中国内地用户和国行苹果设备用户而言,此次发布的Apple智能相关更新,暂时还无法体验,此次AI更新呈现出“环内地、环欧盟”的发布态势。
若用户使用的是外版手机搭配外版Apple ID,那么此次Apple智能更新可谓诚意满满。它不仅让Apple智能在功能上追平了当前行业内较为激进的AI Agent手机,还凭借苹果全平台生态能力以及对隐私保护的执着追求,打出了具有苹果特色的“组合拳”。对于广大国行用户来说,虽暂时无法使用,但也不妨提前了解,说不定未来Apple智能会如大家所期待的那样到来。
此次苹果推出了全新的Apple智能模型。新一代Apple基础模型(AFM)是基于Gemini基础模型打造的,不过并非直接使用Gemini。打个比方,就像A餐厅觉得G餐厅的菜不错,便买下G餐厅的完整食谱,然后按照自己的理解进行改良,形成自己的食谱。但这种合作是一次性的,G餐厅后续调整食谱后,没有义务向A餐厅提供更新和支持,A餐厅需自行领悟改进。在苹果手中,引进Gemini技术并“私有化”后的基础模型分为两个模式,既可以直接在iPhone、iPad和Mac等设备端运行,也能在苹果的私有云计算服务器上运行。这种设备端侧大模型与私有云计算模型的组合,能最大程度保证用户数据在苹果可控范围内,保护用户个人隐私。苹果表示,用户数据他们无法获取,仅用于响应用户请求。苹果还推出了更强的第二代“设备端模型”,具备更好的多模态能力。
随着新技术的推出,iOS、iPadOS和macOS也为全新的Apple智能提供了更丰富的系统级支持,让Apple智能深入到苹果“全家桶”的各个方面。其中,最受关注的当属全新的Siri。
由Apple智能驱动的新Siri被命名为“Siri AI”,在交互方式和理解能力等方面有显著提升。苹果为Siri AI准备了独立App,用户可像使用ChatGPT、Gemini、Grok App一样,在统一入口查看完整的Siri AI交互记录。此前曝光的“灵动岛Siri”界面在大会上得到确认,iPhone用户除了长按侧边按键、喊“Hey Siri”外,还能通过顶部下拉的方式激活Siri。在能力上,Siri AI具备“感知”“理解”“调用”“执行”的能力。“感知”方面,得益于AFM多模态能力的提升,Siri AI不仅能“听”用户说话,还能“看”相机拍摄和屏幕显示的内容,包括图片,语音感知能力也不落下。虽然苹果未披露Siri AI感知画面的具体手段,但猜测可能是基于屏幕截图、录制的GUI Agent,也可能是苹果发挥第一方开发者优势提供了新API。感知屏幕内容后,Siri AI可理解内容并作出响应,如对着旅游照片查找拍摄地点,对着点餐收据计算每人应付金额,或推算食物营养信息。在执行方面,Siri AI能直接用感知信息创建复杂任务,如生成到拍摄点的“三天两夜”旅游规划,还能调用多个系统App执行操作,不过三方App支持情况未知。在macOS上,Siri AI能力更丰富,可直接对多份文档进行对比、总结和修改。苹果还为Siri AI准备了自定义音色功能,用户可通过“拖进度条”的方式自定义音色、语气语速等,打造专属的Siri AI。不过,Siri AI目前仅支持英语,未来将开放包含中文(简体、繁体)在内的多种语言,但此次更新依旧“环内地、环欧盟”,国行用户需等待通知。
除了Siri,苹果还将AI的四大能力深入到其他App中。全新的Safari接入Apple智能后,可对打开的标签页进行“智能分组”,对常开多个标签页查资料的用户非常实用。基于多模态感知能力,Safari还能在后台智能监控网页,待内容更新后向用户发送通知,对于有“网页抢票”需求的用户很实用。而且,Safari还提供了“自制浏览器插件”功能,用户用自然语言告知需求,Safari就能用AI生成满足需求的插件。同样支持“自然语言生成”的还有全新的“快捷指令”。以往创建快捷指令需在复杂列表中选择触发和执行组件,编写完整运行逻辑,流程复杂且有门槛。接入Apple智能后,用户只需用自然语言说出需求,如“当我5分钟后有外地日程,且行程没有机票或车票信息时,自动打开车内空调”,快捷指令就会自动搜索各App(含第三方)的执行能力并生成执行文件。国内使用较少的“Apple家庭”智能家居系统也迎来更新,安装HomeKit摄像头并开启相关服务的用户,家庭App可后台分析监控画面并总结成文字,还能根据用户提问找到对应视频片段。曾被认为“鸡肋”的图乐园也全面升级,不仅具备自然语言生图能力,还能根据用户要求调整风格和画面内容。Apple智能强大的图片能力还为相册App带来了更强的AI图片修改能力,除常见的物件消除、AI扩图外,还加入了“空间构图”能力,可将不同照片拓展成带有空间深度信息的空间照片,再重新取景,为传统二维取景加入“Z”轴,该功能先利用设备端模型实现低延迟实时操作,再调用私有云计算执行完整渲染。
在收费方面,苹果提到部分利用私有云计算能力的Apple智能AI功能有每天使用次数限制,不过iCloud+会加入相关权益。但对于使用国行iPhone、iPad的用户来说,这些新功能仍如“海市蜃楼”,看得见却摸不着。
此次苹果在全球开发者大会上展示Apple智能,有其积极意义。过去苹果在智能交互方面起步早但发展慢,长期“画饼”却拿不出成绩,消磨了用户耐心,也影响了投资人信心。此次展示的Apple智能已“形成体系”,完成度较高。在体验上,苹果更注重将AI融入日常,而非追逐模型参数和跑分成绩。然而,苹果在AI领域仍面临两大挑战。一是Apple智能至今未能进入中国市场,需要苹果在短时间内完成全新AFM的本地合规化流程;二是AI行业已向更高级的自主Agent演进,苹果需尽快“补齐”之前欠下的AI技术债。但苹果目前最缺的就是时间,AI行业技术更新换代快,每天都有新模型、新Agent、新Skill出现,苹果若想在AI行业有所作为,还有很长的路要走。











