OpenAI与苹果合作,将ChatGPT集成在iOS 18中

6月11日凌晨,OpenAI在官网宣布与苹果达成技术合作,将ChatGPT深度集成在苹果产品矩阵中,包括最新的iOS、iPadOS和macOS。

苹果用户可以在手机、平板和笔记本电脑中原生使用ChatGPT进行图片生成、文本生成以及文本摘要等。Siri在ChatGPT的加持下也将变得更智能,例如,让其深度解读文档、图像等内容,都会直接给出答案。

据悉,苹果本次使用的ChatGPT是由GPT-4o提供技术支持,这是OpenAI前不久刚发布的多模态大模型,支持跨文本、视频、音频进行推理,也是专为移动端打造的低消耗、高性能版本。

,时长02:32

同时,苹果在今天凌晨举办的“WWDC24”也宣布了这一消息,重磅推出了“Apple Intelligence”。

这是一款内置在iOS 18、iPadOS 18和macOS Sequoia中的强大生成式AI模型。使用的芯片是苹果自研的M系列和专属云服务器,并且苹果制定了新的AI使用标准以保护用户的隐私和数据安全。

iOS 18中的生成式AI功能展示

根据苹果在大会上的展示,Apple Intelligence的功能主要涵盖文本、语音助手、音频、摘要等多种内容。

例如,可以帮助用户自动生成求职信、邮件、博客内容,同时可以根据不同的语气、应用场景进行切换。

也可以对现有的文本内容的语法、句子结构和标点符号等进行校准,帮助用户快速完成书写。

GPT-4o模型的最大技术优势是多模态推理,尤其是在视频、音频方面的表现非常优秀,所以,苹果用户可以通过手机、笔记本对录制的音频进行内容总结。

例如,你在每周例会上开启了手机的录音功能,在结束后会自动帮你生成大会所有重要内容。

苹果在多种设备中内置了“Image Playground”,用户通过文本就能生成任意数量的图像。

例如,用户可以选择不同的主题、服装和装饰,将自己的照片快速变成卡通、朋克等类型的图像。,时长00:22

你也可以在发送“消息”时,加入一些自己生成图片增加趣味性,例如,朋友过生日,生成一张图片祝他生日快乐。

当你的手机里存储超过10000张图像时,想精准搜索需要的图像变得非常困难。借助新的功能,只需要用文本就能快速精准完成。

例如,帮我搜索一下所有穿着红色上衣、牛仔裤和运动鞋的照片。

Siri大更新,更智能

在生成式AI的加持下,Siri将提供前所未有的超强智能功能。

现在,用户可以通过文本+语音的混合模式与Siri交流,让其理解能力更加准确。同时可以执行跨应用的自动化操作。

例如,当你在消息当中收到一个电话号码时,可以让siri把这个号码自动存储在联系人当中。,时长00:08

或者从你的图库中提取某张旅游照片,然后发送给特定的人。

也可以让Siri快速播放手机中的一首歌曲,用户无需指定这个歌曲在哪个应用中,只需要说名字即可。

或者你可以向Siri询问某人的航班何时降落,Siri会自动搜索该航班的所有信息并为你展示出来。,时长00:14

原生集成ChatGPT

苹果会将 ChatGPT原生集成到 iOS 18、iPadOS 18和macOS Sequoia产品中,用户无需在工具之间跳转即可访问其专业知识以及图像和文档理解功能。

当你用文本、语音模式与Siri交流时,它会利用ChatGPT的知识为你回答各种内容。例如,生成一份7天的旅行计划;写一份关于鞋子的社交媒体平台的宣传稿等。

也可以为正在写的文档,用文本提示的方式自动生成一张插图。

苹果表示,最新的ChatGPT等功能将于今年秋天在iOS 18、iPadOS 18和macOS Sequoia系统中提供测试。M1及更高版本的iPhone 15 Pro、iPhone 15 Pro Max以及iPad和 Mac设备可以免费使用。

虽然苹果整整迟到了一年多才正式加入生成式AI(AIGC)赛道,但这对整个行业发展、应用影响是巨大的,充分说明它对我们工作、生活、娱乐的重要性。