苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生

哈喽大家好,我是站长。谷歌账号、苹果ID、小火箭下载、美区Appstore礼品卡等热门资源,可点击前往

机器心脏报告

同步编辑部

还有史诗级更新:通话录音和 iPad 计算器。

不仅仅是 Siri,苹果作为一个整体,都向前迈出了一大步。

北京时间6月11日凌晨,苹果全球开发者大会WWDC在库比蒂诺的Apple Park正式举行。在这次大会上,正如我们所希望的那样,苹果终于带来了覆盖全系产品的生成式AI技术,但同时也传来了一些让人意想不到的消息。

图片[1]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

苹果首席执行官蒂姆·库克表示:“苹果的目标一直是打造以人为本、易于使用且便捷的个人设备,以改善人们的生活。多年来,我们一直在应用人工智能和机器学习技术来实现这一目标。大型语言模型等最近的人工智能突破让我们有机会将体验推向新的高度。”

现在我们终于知道苹果对生成式人工智能的看法了。首先是理念:它必须强大、直观、完全集成、个性化和私密。

图片[2]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

然后是方法:基于苹果设备强大的M系列芯片,我们采用自研本地大模型加云的策略,本地模型是不常规的,超出本地处理能力的问题可以借助大型云模型(Cloud),或者GPT-4o来解决。

十三年前,苹果语音助手 Siri 诞生,探索智能手机的下一次交互革命。在生成式 AI 时代,Siri 终于有机会实现人们的厚望,它变得更加聪明,知识丰富,像目前最先进的大模型工具一样,给你一步步提示,帮你解决问题。

图片[3]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,您现在可以通过打字与 Siri 进行交互,就像与 Alexa 一样。

苹果表示,Siri 的新形态将带来翻天覆地的变化,大量全新 AI 功能即将上线,屏幕阅读、应用内及应用间操作等其他功能预计明年也将陆续到位。

图片[4]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

新的 Siri 只是苹果 AI 能力的一小部分,今年一个半小时的 WWDC 期间,苹果首次列出 AI 能力的章节,专门介绍从图像到文本的生成式 AI,覆盖手机、iPad 和 Mac,它们都是基于苹果的。

苹果:完整的AI系统

Apple是苹果全新个性化智能系统,充分融合了生成式AI的能力。

图片[5]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

苹果将​​生成式 AI 模型与用户个人数据相结合,提供实用的智能服务。它涵盖 、iPad 和 Mac,并深度集成到 iOS 18、18 和 macOS 中。它利用苹果芯片的强大功能来理解和创建语言和图像,可跨应用程序执行操作,并使用个人信息来简化和加快日常任务。

这些应用程序可以在设备上运行,如果超出了设备的能力,也可以在云端运行。借助云端,苹果正在为人工智能领域设定新的隐私标准,能够灵活地在设备处理和运行在专用苹果芯片上的大型服务器模型之间调整计算能力。

库克表示,Apple Watch 是苹果创新的新篇章,将改变用户使用产品的方式。他强调,苹果独特的做法将生成式人工智能与用户的个人信息结合起来,提供真正有用的智能服务。此外,苹果可以以完全私密、安全的方式访问信息,帮助用户完成对他们来说最重要的事情。这是苹果独特的 AI 体验。

Siri 重生

苹果为 Siri 带来了更深层次的系统集成。Siri 现在拥有更丰富的语言理解能力,使其更加自然、更具语境和个性化,简化并加快日常任务。Siri 可以理解用户说话时的犹豫,并在不同请求之间保持上下文。用户还可以通过打字与 Siri 交流,并根据需要在文本和语音之间切换。此外,Siri 拥有全新的设计,当 Siri 处于活动状态时,屏幕边缘将被优雅的发光效果环绕。

图片[6]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

现在,用户可以向 Siri 输入文本,或者在文本和语音之间切换以任何合适的方式与 Siri 进行交流。

Siri 现在为用户提供全面的设备支持,无论身在何处,都可以回答有关 、iPad 和 Mac 操作的数千个问题。例如,用户可以了解如何在 Mail 中安排电子邮件、如何从浅色模式切换到深色模式等等。

图片[7]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

而且,借助屏幕感知功能,Siri 可以让你轻松执行与屏幕上的信息相关的操作,例如将聊天消息中收到的地址添加到朋友的地址簿中。

图片[8]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

借助 Apple,Siri 可以在 Apple 和第三方应用中执行数百项新操作。例如,用户可以说“在我的阅读列表中查找有关蝉的文章”,或“向玛丽亚发送周六烧烤的照片”,Siri 会自动处理这些请求。

图片[9]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

Siri 现在可以在应用程序内和跨应用程序执行数百项新操作,包括在信息和邮件中查找朋友发送的图书推荐。

Siri 可以根据用户的设备信息提供个性化智能服务。例如,用户可以说:“播放 Jamie 推荐的播客”,Siri 就会定位并播放该播客,而用户无需记住它是在短信还是电子邮件中提及的。用户还可以问:“妈妈的航班什么时候到达?”Siri 会查找航班详细信息,并将其与实时航班跟踪数据进行交叉引用,以提供到达时间。

图片[10]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

Siri 会根据您设备上存储的信息以及设备上的信息为您提供量身定制的智能服务,例如查找即将起飞的航班的详细信息或跟踪晚餐预订。

其实苹果早在4月份的一篇论文中就已经透露了Siri的这次更新,不过当时并未引起足够的重视,详情可以参考机器之心的报道:让大模型看懂手机屏幕,苹果的-UI用自然语言控制手机。

图片[11]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,苹果还开源了一些相关研究,参见:

图片[12]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

跨 Apple 平台集成

正如所料,今天苹果发布会的一大亮点就是与苹果的合作。

苹果宣布,苹果正在将 AI 融入到 iOS 18、18 和 macOS 的体验中,让用户无需在工具之间切换即可访问 AI,包括图像和文档理解功能。

此外,Siri 还可以随时使用专业答案。但在 Siri 向用户发送任何问题、任何文件或照片之前,它都会先询问用户,然后 Siri 才会直接给出答案。

图片[13]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

当用户授予权限时 Siri 可以利用的响应。

此外,苹果系统范围内的写作工具可以帮助用户生成内容,用户还可以使用图片工具来生成多种风格的图片。

图片[14]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

使用写作工具来协助写作

至于发布时间,苹果表示将于今年晚些时候在 iOS 18、18.1 和 macOS 上推出,由 GPT-4o 提供支持。用户无需创建账户即可免费访问,订阅者可以直接从这些体验中连接他们的账户并访问付费功能。

最后,苹果对用户完全免费,并将于今年秋季作为 iOS 18、19 和 macOS 的一部分提供英语测试版。明年将提供更广泛的功能、软件平台和其他语言。苹果将在 15 Pro、15 Pro Max 以及搭载 M1 及更高版本的 iPad 和 Mac 上提供该功能。

这意味着如果你想使用这些大型号的功能,你就必须花钱购买最新的苹果设备。

图片[15]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

新的语言理解和创造能力

苹果为用户开辟了提高写作水平和更有效沟通的新方法。

iOS 18、18 和 macOS 内置了新的系统级写作工具,允许用户在几乎任何写作环境中重写、校对和总结文本,包括电子邮件、笔记、页面和第三方应用程序。

借助 功能,用户可以从多个版本中进行选择,调整风格以适应不同的读者和场合。无论是增加求职信的说服力,还是为聚会邀请函注入幽默和创意, 都可以帮助用户找到合适的表达方式。

校对功能会深入检查语法、词汇和句子结构,并提供建议的编辑意见和解释,让用户可以轻松审阅或快速采纳。例如,当用户撰写电子邮件时,写作工具菜单会弹出,提供校对和重写的选项,用户可以根据自己的需求选择相应的功能。

摘要功能让用户可以一键选择文字,生成简洁明了的段落、要点、表格或列表,让信息一目了然。例如,当用户启动备忘录应用,记录与全面健康相关的内容时,可以利用“摘要”功能提取重点。

图片[16]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

管理电子邮件是一件令人头疼的事情,而全新的“优先邮件”功能则将最紧急的邮件——比如晚餐邀请或当天的登机牌——放在收件箱的顶部,让用户无需打开邮件就能一目了然地看到每封邮件的摘要。

图片[17]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

当面对长长的电子邮件线索时,用户只需点击屏幕即可获取关键信息。

图片[18]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

智能回复功能提供快捷的回复选项,并能精准识别邮件中的问题,确保每一项都得到妥善的回复,让邮件管理更加轻松。

图片[19]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

这种对语言的深刻理解也延伸到了通知领域,最重要的通知会被提升到通知列表的顶部,而片段则可以帮助用户在锁定屏幕上快速扫描长通知或堆叠通知,以显示关键细节。

图片[20]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

“减少干扰”是一种新的专注模式,当群聊特别活跃时,通过仅显示可能需要立即关注的通知(例如,提前从托儿所接孩子的紧急短信),可帮助用户更好地专注于手头的任务。

图片[21]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,Notes 和 Phone 应用程序还添加了新功能,允许用户记录通话、实时转录对话并自动生成摘要。

图片[22]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

通话过程中,如果用户选择录音,所有通话参与者都会收到通知。通话一结束,苹果就会立即生成摘要,帮助用户快速回顾并掌握对话中的关键信息。

图片[23]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

图像

Apple 提供了激动人心的图像生成功能,可帮助用户以新的方式交流和表达自己,主要通过新的 Image 应用功能实现。借助 Image,用户可以在几秒钟内创建有趣的图像,并从三种样式中进行选择:动画、插图或素描。

Image 易于使用,可直接内置于包括在内的应用中,也可在专用应用中使用,非常适合尝试不同的概念和风格。所有图像均在设备上创建,用户可以尝试任意数量的图像。

图片[24]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

通过 Image,用户可以:

图片[25]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

借助 中的图片功能,用户可以快速为好友创建有趣的图片,甚至可以看到与对话相关的个性化建议。例如,当用户向群组发送有关徒步旅行的消息时,他们会看到与好友、目的地和活动相关的建议概念,从而使图片创建更快、更相关。

图片[26]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

图片[27]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

在 Notes 中,用户可以通过 Apple 工具面板中的新 Image Wand 访问图像,让笔记更具视觉吸引力。草图可以变成赏心悦目的图像,用户甚至可以选择空白区域,使用周围区域的背景来创建图像。

图片[28]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,Image 还可在、、和 Pages 等应用程序以及采用新 Image API 的第三方应用程序中使用。

:将表情符号提升到一个全新的水平

用户可以创建原创的来表达自己的想法,只需输入描述,符合要求的就会与其他选项一起出现。

图片[29]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

用户甚至可以根据照片为亲朋好友创建表情。就像表情符号一样,它们可以内嵌在消息中或作为贴纸分享。

图片[30]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

用户只需要输入描述、生成等选项

图片[31]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

就像表情符号一样,它们可以内嵌添加到消息中

照片中的新功能让用户拥有更多控制权

有了苹果,搜索照片和视频将变得更加方便。用户可以使用自然语言搜索特定的照片,例如“穿着扎染衬衫玩滑板的玛雅”或“脸上贴着贴纸的凯蒂”。

图片[32]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,视频搜索功能也变得更加强大,用户可以在视频片段中查找特定时刻并直接跳转到相关片段。此外,新的“清理”工具可以在不改变主体的情况下识别并删除照片背景中的干扰物体。

图片[33]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

借助“故事”功能,用户只需输入描述即可创建自己想看的故事。借助语言和图像理解,Apple 将根据描述挑选最佳照片和视频,并根据照片中识别的主题创建故事情节,并将其编排成具有独特叙事弧线的电影。用户甚至会收到 Apple Music 的歌曲推荐。与所有 Apple 功能一样,用户的照片和视频将在其设备上保持私密,不会与他人共享。

图片[34]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

人工智能隐私的新标准

Apple 要想真正帮助用户,就必须了解深层的个人背景,同时保护用户隐私。Apple 的基石是设备处理,许多模型完全在设备上运行。对于需要更多处理能力的更复杂请求,Cloud 将 Apple 设备的隐私和安全扩展到云端,以解锁更多智能功能。

通过云端,Apple 能够灵活地扩展其计算能力,并利用更大的基于服务器的模型来处理更复杂的请求。这些模型在搭载 Apple 芯片的服务器上运行,为 Apple 提供了确保数据永远不会被保留或泄露的基础。

图片[15]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

独立专家可以检查苹果芯片服务器上运行的代码,以验证隐私保护。Cloud 通过加密确保 iPad 和 Mac 不会与服务器通信,除非其软件已公开记录以供检查。Apple 和 Cloud 为人工智能领域的隐私保护树立了新标准,为用户提供值得信赖的智能服务。

:苹果的智能

苹果的Apple Watch受到了全球科技专业人士的关注,一位创始成员发文总结称,他非常喜欢苹果发布的《苹果情报》,他亲眼观察到了以下几个主题:

多模式输入/输出。Apple 支持文本/音频/图像/视频的读写。可以说,这些都是原生的人类 API。Apple 允许操作系统和应用程序的所有部分通过“函数调用”进行互操作;内核进程 LLM 根据用户查询协调它们之间的工作。无摩擦。Apple 以高度流畅、快速、随时随地和情境化的方式完全集成了这些功能。无需到处复制粘贴信息、提示工程等。用户界面也会进行相应调整。主动。Apple 不会根据提示执行任务,而是预测提示、提出建议并主动执行任务。分层授权。将尽可能多的智能转移到设备上(Apple 芯片非常有用且合适),但允许可选地将工作转移到云端。模块化。允许操作系统访问和支持整个不断发展的 LLM 生态系统(例如公告)。隐私。

他说:“我们正在迅速进入这样一个世界:你打开手机,说任何话,它都会回应你,理解你,并且正常工作,这非常令人兴奋。”

图片[36]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

新的 macOS 系统实现了 Mac 和

此次,苹果macOS系统也迎来了重大版本更新,包括系统名称、一系列新功能等。

macOS 15 已更名为 macOS,将于下个月作为公开测试版发布,今年秋季将向普通用户推出完整版。引入的最引人注目的功能包括镜像()、通知()和升级。

图片[37]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

我们重点介绍了新增加的镜像功能,该功能允许用户完全直接在 Mac 上访问和使用。用户可以在 Mac 设备上启动和浏览他们想要执行操作的任何应用程序,并通过键盘、触控板和鼠标与手机无缝交互。

图片[38]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

滑动屏幕。

图片[39]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

打开应用程序。

通过Mac上的通知功能,用户可以在Mac上接收手机发送的通知,点击通知即可进入相应应用。

图片[40]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

当用户使用 Mac 工作时,屏幕会锁定在待机模式,因此其他人无法访问或查看您正在做的事情。

图片[41]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

通过拖放操作轻松地在 Mac 和 Mac 之间传输文件。

虽然iOS的App已经可以在Mac上运行,但直接在手机界面进行操作显然更加直观,在这方面Mac可以说已经跟上了和鸿蒙的步伐。

macOS 还加入了类似于的全新窗口排列工具,可以自动调整应用窗口大小平铺填满屏幕。当用户将窗口拖拽至屏幕边缘时,系统会自动建议将其放置在桌面的哪个位置,让桌面整洁有序。

用户可以选择将窗口并排平铺或在角落平铺以查看更多应用程序,而新的键盘和菜单快捷键可以帮助更快地排列平铺。

图片[42]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

此外,Mac 内置的浏览器通过“突出显示”功能让用户更轻松地发现信息,例如路线、摘要或快速链接。这里使用机器学习技术自动检测用户正在浏览的信息并将其突出显示。

图片[43]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

规划路线时突出显示。

可以看出,新版 macOS 系统下的 Mac 体验更加轻松,更加便捷,更加高效。

违背祖训,在 iPad 上安装计算器

对于 iPad 用户来说,最大的提升莫过于终于有原生的计算器应用了。乔布斯曾表示,在 iPad 上放一个计算器是“违反直觉的”,因此十多年来,这款全球最受欢迎的平板设备一直没有计算器应用。

如今生成式人工智能已经到来,苹果却立刻“违背了祖传教义”。

苹果推出了一款全新的 Math Notes 计算器,让用户可以输入或手写数学表达式,并立即以自己的笔迹看到解出的结果。用户还可以在学习新概念、计算预算等时为变量赋值。新的绘图功能让用户只需轻点一下即可编写或输入方程式并插入图表,甚至可以在同一张图表上添加多个方程式以查看它们之间的关系。

图片[44]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

计算器应用程序专为 iPad 的独特功能而设计,提供了一种使用 Apple 解决表达式的全新方法。

当然,这一切的前提是你得有一台苹果。

这款 iPad 上的基本科学计算器可让您在完成表达式之前轻松查看完整的表达式。历史记录功能可帮助用户跟踪之前的计算,而单位转换功能则允许用户快速转换长度、重量、货币等单位。

图片[45]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

通过数学笔记,计算器允许用户键入或编写数学表达式并立即看到其解决方案,以及为表达式中使用的变量分配值。

还有一件事

除了 macOS 和 macOS 的重大升级外,苹果还对其他设备上的系统进行了相应的更新。Mixed Pro 拥有一个全新的系统——macOS 2,增加了许多新功能,比如利用先进的机器学习从 2D 图像中推导出左右眼视图,并创建具有自然深度的空间照片。

图片[46]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

6月28日,Pro将在中国、日本和新加坡等地率先发售。中国区售价方面,256GB版售价29999元起,512GB版售价31499元起,1TB版售价32999元。这样的价格,你会买吗?

图片[47]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

苹果的一系列发布,不仅紧跟节奏,也发挥了苹果自身软硬件整合的优势,毕竟在安卓阵营,短期内很难看到手机和服务器采用同一款芯片架构,另一方面与最先进技术进行深度合作,也算“开明”的表现。

那么苹果在AI落地的前景是否光明呢?不一定,因为其股价今天仍然下跌。

图片[48]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

WWDC结束后,苹果市值再度被超越。

此外,马斯克还表示,由于苹果存在系统级集成,因此其不安全性令人无法接受,必须在我公司禁用。

图片[49]-苹果智能大爆发:GPT-4o加入,全家桶都搭载生成式AI,Siri重生-GuGeZone

投资者和竞争对手都有一些担忧。

“苹果”能否帮助苹果在生成式AI领域超越苹果,或许仍需要时间的考验。

参考链接:

哈喽大家好,我是站长。谷歌账号、苹果ID、小火箭下载、美区Appstore礼品卡等热门资源,可点击前往

© 版权声明
THE END
喜欢就支持一下吧
点赞12 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情代码图片

    暂无评论内容