蘋果重新定義AI手機,iOS 18究極進化:聯(lián)手OpenAI整合GPT-4o,馬斯克“氣炸”直言將棄用iPhone
千呼萬喚,蘋果用AI重塑iOS,iPhone史上最強「進化」,答案終于揭曉!
庫克這波直接站在了山頂……哦不,屋頂。?
在日前,我們推送的文章介紹了iOS 18的十二項重大更新:
庫克的“終極高考”,蘋果操作系統(tǒng)史上最大更新:12項iOS 18功能超前看
蘋果公司將在北京時間6月11日凌晨1點舉行WWDC開發(fā)者大會的現(xiàn)場直播。今年將發(fā)布的iOS 18,將是蘋果操作系統(tǒng)開啟「AI改造」的第一場高考。
這些傳聞最終被證明,通通都是真的——?
蘋果與OpenAI達成API接入合作,iOS直接嵌入ChatGPT,免費使用GPT-4o模型。Siri完成“換腦”重生,iPhone革新人機交互形態(tài),AI智能助手代勞一切近在咫尺。
蘋果正式宣布新業(yè)務(wù)板塊「Apple Intelligence」(蘋果智能),就此成為蘋果「AI」業(yè)務(wù)線的全新代名詞,這個詞組縮寫也是「AI」。
自媒體文章都說今年沒人買iPhone了,發(fā)布會一結(jié)束,#WWDC24#立馬沖進熱搜前三。
簡單總結(jié),這場發(fā)布的內(nèi)容就是蘋果OS家族集體大更新。
在「Apple Intelligence」加持下,?iOS的AI濃度飆升。下文提及的全部「Apple Intelligence」服務(wù),蘋果免費提供!
但是劃重點!~ AI功能僅支持iPhone 15 Pro及以上設(shè)備,以及搭載M系列芯片的iPad與Mac設(shè)備。
?廚子精準(zhǔn)刀法,這是逼你換新設(shè)備呢!
內(nèi)置的ChatGPT無需注冊即可直接使用,同時也不會在ChatGPT官網(wǎng)留下使用痕跡與歷史記錄。
什么時候可以用上iOS 18?
據(jù)悉,iOS 18、iPadOS 18、macOS Sequoia的測試版將在今年秋季以英文版率先發(fā)布,應(yīng)該是9月份。
那么接下來我們具體來看,「Apple Intelligence」都有哪些服務(wù)?
蘋果選擇端側(cè)AI+引入強大云端AI大模型來輔助內(nèi)容生成。
蘋果生成式AI的基礎(chǔ)能力共分為四個方面:語言、圖像、交互和個性化。
語言交互是大語言模型的基礎(chǔ),蘋果AI能為iPhone通知消息設(shè)定優(yōu)先級次序,把最重要的信息呈現(xiàn)在最上方。
同時,還支持在全系統(tǒng)內(nèi)的寫作工具(包括Keynotes以及第三方APP等), 支持AI重寫、校對、提取摘要、創(chuàng)作評論等功能。
圖像方面,蘋果AI能分清楚相冊中不同的面孔,并基于他們生成圖像。
一共支持素描、插畫、動畫3種生成風(fēng)格,可在信息、無邊記等各種APP中使用。
如果想不到提示詞,Image Playground還支持根據(jù)標(biāo)簽生成圖像,模型在端側(cè)運行。
另一個重大的圖像生成能力是Emoji都能自定義了!
蘋果整了一個趣味表情包生成器「Genmoji」,能根據(jù)提供的描述生成最符合你心意的Emoji,還能根據(jù)相冊中的人物臉龐進行個性定制。
除此之外,蘋果還在相冊的編輯功能集成了擦除照片中的干擾物與路人甲的功能,這算得上最受消費者歡迎的AI能力了。
更可以直接在相冊內(nèi)直接使用自然語言搜索相關(guān)的圖像及視頻,直接描述當(dāng)時拍攝的場景即可:
根據(jù)輸入的提示詞,蘋果AI會選擇出最佳相片進行一鍵剪輯生成MV:
交互方面,蘋果AI可以在系統(tǒng)級上實現(xiàn)APP內(nèi)或者跨APP之間的任務(wù)執(zhí)行,同時開放了API接口,讓開發(fā)者大膽創(chuàng)新。
比如直接開口詢問Siri——幫我直接找出某人上周發(fā)給我的文檔、找到與媽媽相關(guān)的照片等,AI系統(tǒng)就能一句話的功夫直接代勞。
最強大的系統(tǒng)級AI能力整合,莫過于深刻理解個人情景。
不僅分析各種個人信息數(shù)據(jù),還能讀懂屏幕。
舉個例子?,比如我突然郵件通知了一個臨時會議,那么還能趕上接下來女兒的演出嗎?
蘋果AI可以自動識別分析郵件中的會議時間、知道“女兒”是哪位、找到“女兒”演出的時間地點日程、并從地圖中規(guī)劃路線,最后給出分析結(jié)果輸出。
但如此深度的隱私信息智能管理,個人信息如何保障?
蘋果表示推出了專門的隱私架構(gòu),涉及到個人隱私的計算,能在端側(cè)就在端側(cè)進行。在這方面,他們對硬件進行深度整合,A17 Pro以上的芯片都支持。同時在云端(云上貴州),他們也推出了Private Cloud Compute,可以提供芯片級的信息保護。
在用戶發(fā)出指令后,蘋果AI會先分析請求是否能在端側(cè)利用大模型解決,如果不能再調(diào)用云端模型。
蘋果自信表示,他們?yōu)锳I隱私保護設(shè)立了全新標(biāo)準(zhǔn)。
除此之外,蘋果AI還能對錄音內(nèi)容自動生成摘要、總結(jié)電話錄音。
那么,廣泛的百科問答該如何解決呢?
而對于需要更廣闊知識、垂類特長的提問任務(wù),蘋果搬出了合作伙伴ChatGPT。
比如想要為菜譜提供靈感,可以問問Siri,Siri就會推薦用戶啟動ChatGPT。
如果接受這一建議,就能立馬獲得來自ChatGPT的答案,并且直接以iOS系統(tǒng)通知的方式呈現(xiàn)。
ChatGPT的多模態(tài)任務(wù)也同樣支持,可以將照片、PDF等文檔分享給Siri,調(diào)用ChatGPT幫忙解讀。
手機上的數(shù)據(jù)會被分享到ChatGPT的服務(wù)器,事先會先征得用戶意見。
以上功能都是免費的,很贊,蘋果用戶免費不限量玩GPT-4o。除此之外,用戶也可以選擇綁定自己的ChatGPT Plus賬戶,使用付費功能。
Siri打通ChatGPT的功能將在今年秋季推出。
但蘋果并不滿足于此,官方還透露未來允許用戶選擇自己喜歡的AI大模型使用,比如谷歌的Gemini。
即日起,Siri這個10年“AI老人”,在Apple Intelligence加持下,正式邁入新紀(jì)元。
Siri大變臉,換了扁平風(fēng)格的新Logo,交互界面也更更自然、更貼合語境、也更接近用戶。
從外觀來看,當(dāng)和Siri對話時,屏幕邊緣會環(huán)繞一圈神秘的彩虹光暈?。
Siri現(xiàn)在可以理解更豐富的自然語言,基礎(chǔ)的日常問答不在話下:
并且Siri也可以通過上下文來理解用戶的需求。
即使停頓一下再讓它安排日程,它也能理解用戶需要設(shè)置的日程指的是什么地點。
此外,以前只能通過語音喚醒交互的Siri,現(xiàn)在還支持文本輸入指令。
只需在屏幕下方底部輕敲兩下,就能召喚出鍵盤。
更重要的是,Siri已經(jīng)掌握了大量關(guān)于iPhone功能和設(shè)置的信息,能夠解答許多手機使用的問題。
即便你不記得具體某項功能叫什么名字,只需要表述個大概,Siri就能懂你說的是哪個功能。
蘋果預(yù)告了明年將推出更多新功能:
首先,「Apple Intelligence」將為Siri帶來“屏幕內(nèi)容感知”功能。
Siri還將能夠理解用戶在APP中的更多操作,代替用戶完成數(shù)百種APP內(nèi)與APP之間的交互操作,其中還可以代勞完成文本創(chuàng)作和圖像生成。
比如讓它找到某張照片,然后一鍵修圖:
Siri還可以進行跨APP操作,將修好的圖片自動添加到指定的備忘錄中:
據(jù)蘋果介紹,能夠做到這些,還得益于其對APP Intents框架的增強,能讓APP定義Siri、快捷指令及其它系統(tǒng)體驗。
而這些增強功能并不局限于蘋果第一方的APP,第三方開發(fā)者可以借助APP Intents API重新設(shè)置開發(fā)他們的APP中的各種交互操作。
還沒完,「Apple Intelligence」所提供的“個人情境認知”能力,讓Siri發(fā)現(xiàn)和理解的內(nèi)容范圍遠超以往。
例如,用戶直接詢問“媽媽的航班幾點到達”,Siri就能自主參考郵件APP中的航班詳情以及航班實時動態(tài),提供最新的到達時間。
接著詢問“午飯怎么安排”,Siri就能追蹤到消息APP閑聊里的內(nèi)容,回答在哪個餐廳預(yù)訂了餐桌,吃什么菜色。
緊接著,還能給出從機場到吃飯餐廳所需要的時長。
以上復(fù)雜場景的連貫騷操作,完全不需要用戶去點擊若干APP自己查詢信息,直接問Siri,幾秒鐘就能搞定!
最后,Siri的所有新功能,都將同樣適用于iPad和Mac設(shè)備上。
WWDC會后,馬斯克發(fā)推文表示,如果OpenAI的GPT大模型被集成到蘋果的操作系統(tǒng)中,將在公司全面禁止蘋果的設(shè)備,稱這種產(chǎn)品端的數(shù)據(jù)交換合作存在極高的安全風(fēng)險。
不僅如此,他還發(fā)布了一張極具諷刺的梗圖來總結(jié)他的觀點。
馬斯克強調(diào),(蘋果與OpenAI的合作)那將是不可接受的危害安全之舉。
他還表示,旗下公司的訪客將被要求在門口檢查其蘋果設(shè)備,并將手機放置在一個信號屏蔽容器當(dāng)中。
馬斯克補充說,蘋果不夠聰明,無法開發(fā)自己的人工智能,但卻能確保OpenAI保護你的安全和隱私,這顯然是荒謬的。蘋果完全不清楚數(shù)據(jù)交給OpenAI后會發(fā)生什么,他們這么做完全是在出賣自己的用戶。
?這就很令人尷尬了,不知道老馬將來會讓員工使用什么設(shè)備工作?
不過話說回來,老馬的iPhone型號太舊,原則上用不了「蘋果AI」…?
在發(fā)布會結(jié)束后,庫克發(fā)布了一篇推文,總結(jié)蘋果的「AI之道」:
在本場開發(fā)者活動上,蘋果依然多次提及「機器學(xué)習(xí)」,但也首次提及「大語言模型」「擴散模型」等生成式AI專業(yè)詞匯。
全局AI,打造真正的AI手機。
總之,蘋果是終于出手了。