AppleIntelligence:嵌入苹果生态系的生成式AI大模型

安全运维得看我 2024-06-13 08:00:21

一直以来似乎淡出了当下大流行的AI,被微软、英伟达、谷歌、Beta等科技公司远远甩在后面。然而,事情并不是那么简单,原来苹果一直在闭关研究新的AI绝技!在WWDC 2024上苹果出关、推出了自家生成式AI引擎 “Apple Intelligence(苹果智能,简称AI)”,一套适用于果粉所有硬件设备iPhone、Mac,Ipad新一代人工智能大模型。另外还将推出新一代更智能和人性对话式的Siri、AI支撑的“Genmoji”。另外Apple Intelligence将在后台集成OpenAI和谷歌Gemini等专业的AI模型。马上果粉就可以无需注册OpenAI账号免费试用AIGPT-4o(国内苹果设备尚不明确)。

个性化AI

在发布会上,苹果CEO表示,苹果AI主要立足个性,在保证隐私和安全的前提下挖掘个人智慧:

“最重要的是,它必须了解你,并立足于你的个人背景,比如你的日常生活、你的人际关系、你的沟通等等。当然,它就关注就隐私。所有这一切都超出了人工智能的范围。这是个人智慧,也是苹果公司的下一个重大举措。”

“它必须足够强大,能够帮助处理对你来说最重要的事情。” “它必须直观且易于使用。它必须深入融入到用户产品体验中。最重要的是,它必须了解并立足于用户个人背景,例如日常生活、人际关系、沟通等等。”

和苹果软硬件的深度结合一样,苹果AI的功能也将作为生态系的一部分,将深入嵌入到其操作系统中包括iOS、macOS 和最新的visionOS,另外其也需接触了硬件芯片的支持。

苹果AI建立在大语言模型和智能模型的基础上,大部分计算和处理都是在本地完成的,并且必须使用最新版本的苹果芯片。但是这样会存在算力的限制,一些繁重的工作需要在云端设备上完成,这些任务将由苹果私有云计算来承担。后端使用运行苹果芯片的服务,以提高个人数据的隐私性。

新一代智能Siri

苹果AI所有功能将嵌入系统底层,在应用程序之间执行操作,比如管理通知、自动撰写总结邮件和其他应用程序中的文本。与其他内置人工智能书写工具一样,也可以根据提示更改文章,比如改变其语境等。

另一类重要的功能是辅助执行,让一个应用程序在另一个应用程序中执行操作之类的操作。在调用Siri时,可以自动实现“屏幕感知”,这样它可以理解你的当前语境下的一些要求,并“随着时间的推移,对更多应用程序中内容进行操作” 。所有操作对象包括苹果应用和第三方APP。

除了语音呼叫Siri发出指令,新Siri也支持输入文字,这样可以避免某些场景下语音干扰到别人或者被人误解和干扰。

图像生成

苹果Genmoji在AI的加持下,可以实现即时生成类似表情符号。这样当你找不到你想要的反应时,Genmoji和AI将帮你创建。

一项新的图像生成功能将在iOS 18中推出,该功能命名为Image Playground(IP)。该功能内至于多个应用程序,比如Messages、Keynote、Pages和Freeform等应用程序,同时也提供一个独立功能的同名APP。

苹果开放了API供开发者调用已实现在其应用中包含Image Playground。在AP支持下,在图库中可以实现搜索图片中的物体,比如你可以搜索诸如打篮球跳舞的人(鸡哥)。

照片应用中也借鉴了点谷歌魔术橡皮擦的功能,可以从照片中删除人物的功能,以后大家可以自己抠图,无需发到网上求教抠图高手帮忙了。

同时,在苹果Apple Pencil中新推出了一个Image Wand工具。该工具可以让用户圈出文本来创建图像。实际上,这是苹果对谷歌搜索圈的模仿,只专注于图像。

其他AI应用

苹果AI还建立了针对照片和视频等内容的搜索,可以实现在这类应用程序中进行更多自然语言搜索。

通过自然语言提示,GenAI模型还可以更轻松地在照片中构建幻灯片。

第三方AI集成

正如之前外界报道的一样,苹果承认了与OpenAI的战略合作,将ChatGPT引入Siri等产品中。通过GPT-4o的高级功能来提高苹果AI的图像和文本生成功能。将来,苹果用户将无需注册帐户或支付费用即可访问GPT 4.0基本功能(可以升级到高级版OpenAI)。

另外其他第三方大模型支持也很快加入,比如谷歌的Gemini等。

软硬件要求

Apple Intelligence将在最新版本的操作系统中推出,包括iOS和iPadOS 18、macOS Sequoia和visionOS 2等,这些更新可免费使用。

硬件要求则需要在iPhone 15 Pro以及M1 Mac和iPad设备。标准版iPhone 15和早期产品由于芯片限制,将无法支持。

也许有新的理由升级你的老苹果机了。

0 阅读:0

安全运维得看我

简介:感谢大家的关注