生成式AI,蘋果傾巢出動

智東西作者 雲鵬編輯 李水青

智東西5月11日消息,今天一大早,蘋果AI炸了鍋!

一邊彭博社曝出猛料:蘋果馬上要跟OpenAI簽署協議,將ChatGPT相關技術用在iPhone裡。

另一邊,《紐約時報》曝出蘋果Siri即將發佈的一系列重磅生成式AI升級、背後研發細節,以及蘋果頂層高管做出要給Siri做“大腦移植”這一決定的幕後原因。

外媒AppleInsider則報道稱,蘋果將把實時錄音轉錄、文本摘要總結等標誌性生成式AI功能用在語音備忘錄、筆記、消息、Safari等核心系統級應用中,做“系統級AI”。

在當下這波以大語言模型爲基礎的生成式AI熱潮中,蘋果毫無疑問是落後了,以ChatGPT爲代表的聊天機器人應用已經火遍全球,但蘋果至今還沒有明確動作。

以蘋果公司CEO庫克爲代表的高管不停地向外界傳達“蘋果很重視生成式AI”這一觀念,但最終大家關注的還是蘋果到底要怎麼做AI。

今天,關於蘋果AI的更多關鍵問題,似乎都有了更清晰的答案。蘋果的生成式AI大招,我們已經能夠窺見一隅。

一、擁抱OpenAI?蘋果做AI選擇兩條腿走路

蘋果做AI到底是單幹還是合作?目前來看,蘋果大概率是會“兩條腿走路”。

據彭博社報道,蘋果即將與OpenAI達成一項協議,在iPhone上使用OpenAI的相關技術,將ChatGPT放到iPhone中(Put ChatGPT on iPhone)。根據這份協議,蘋果將在未來發布的iOS 18中使用ChatGPT功能。

雙方談判仍在進行中,協議尚未最終達成。

但值得注意的是,ChatGPT此前早已在蘋果的App Store中開放下載多時,iPhone用上ChatGPT,已經是過去時了,所以此次蘋果與OpenAI的合作,或許更多聚焦於背後的模型層面,將更多“ChatGPT的能力”接入到iPhone中。

據彭博社報道,蘋果也在與谷歌就使用Gemini大模型問題進行商談。

二、蘋果要給Siri“換腦”!從根上治病

說完了合作,我們來看看蘋果自己的AI到底要怎麼做。據《紐約時報》報道,Siri將會成爲蘋果做生成式AI的關鍵抓手之一。

據報道,其實從去年年初,也就是ChatGPT剛火的那陣子,蘋果公司軟件工程高級副總裁Craig Federighi和蘋果公司機器學習和AI戰略高級副總裁John Giannandrea就已經做出決定,要給Siri來個“大腦移植”。

沒錯,治標已經不行了,蘋果要直接給Siri換個腦子。

這兩位高管都是蘋果發佈會上的熟面孔了,也是直接向庫克彙報的蘋果核心高管,可以說,蘋果的AI要做成什麼樣,庫克和這兩個人是最核心決策者。

據報道,這兩位高管花了好幾周測試OpenAI的ChatGPT,這促使他們做出了給Siri“換腦”的決定。

有熟悉Siri的蘋果人士透露,當時ChatGPT寫詩、寫代碼、回答複雜問題幾乎無所不能,這讓Siri看起來有些過時。

三、Siri十三年後,蘋果發動十年來最大規模內部改組

2011年,Siri作爲最早的一批智能助手出現在了iPhone上,只不過那時的“智能”還較爲初級。十幾年來,Siri一直聚焦於處理一些個人請求,不具備對話跟蹤能力,誤解問題是家常便飯。

什麼是對話跟蹤?比如你問ChatGPT舊金山天氣怎樣,然後緊接着問它“紐約怎麼樣?”,ChatGPT會明白你是在問紐約的天氣,但Siri就不知道。

毫無疑問,Siri的能力已經被大幅趕超了,在技術層面,Siri已經落後了。這促使蘋果這家科技巨頭進行了十多年來最大規模的內部改組。

據報道,目前生成式AI在蘋果內部已經成爲了一個“支柱型”項目,一個“a tent pole(帳篷杆)”的項目,“帳篷杆”這個叫法是蘋果內部特有的,用來組織蘋果員工參與這場十年一遇的創新大項目。

可以肯定的是,蘋果正全力以赴在這場AI競賽中迎頭趕上。

四、Siri將擁有一套新的生成式AI系統,端側大模型“幻覺”或成挑戰

蘋果的決心我們都明白了,那“換腦”後的Siri究竟會變成什麼樣?

目前各路報道都認爲蘋果會在6月10日舉辦的WWDC24上發佈升級版Siri,也就是蘋果的重要AI大招之一。

升級後的Siri會更能聊,功能也會更加豐富。據三名相關知情人士透露,Siri的基礎技術將會包括一套新的生成式AI系統,這套系統會讓Siri和ChatGPT一樣具備真正的“聊天”能力,而不僅僅是“一問一答”。

2018年之前一直在蘋果工作的Siri聯合創始人Tom Gruber說,Siri一直想擁有一個可以理解語言和上下文的對話界面,但這一直很難實現。

據三位知情人士透露,蘋果並不會發佈一款“類ChatGPT”應用來直接與ChatGPT競爭,蘋果的重點是讓Siri更好地完成手頭的既有任務,比如設置計時器、創建日程安排、在購物清單上添加心儀的商品,當然,新Siri也可以總結文本信息。

蘋果在宣傳新Siri時,可能會更側重標榜其“私密性”,因爲Siri處理所有的請求都將是在“端側”完成的,也就是在iPhone上處理,而不用“上雲”。

這側面可以幫蘋果省下一筆不小的費用,要知道,ChatGPT每生成1000個單詞就要花OpenAI 12美分。

當然,蘋果這種做法不是沒有弊端的,iPhone本地運行的模型規模有限,這種較小型的模型最容易出現的一個問題就是“幻覺”——編造出一些事實上本不存在的答案。

值得一提的是,蘋果在iPhone 15系列上還提前把內存升級到了8GB,這被認爲是給新Siri提前做的準備之一。另外蘋果也在跟谷歌、OpenAI、Cohere等公司商談AI大模型相關授權問題,提前做好準備。

五、更多重磅生成式AI功能落地系統級應用,關鍵功能仍需端雲協同

除了Siri,據外媒AppleInsider報道,蘋果準備將實時錄音轉錄和摘要總結功能應用在多款產品中,並且這個功能會是“系統級”的,也就是說,不論是你是看視頻還是開會,都可以錄音並總結重點。

蘋果的語音備忘錄(Voice Memos)應用將是首批獲得這一功能升級的應用程序之一。

此外筆記(Notes)應用也會升級,支持基本的文本摘要、總結功能,加上內置的音頻錄製和實時轉錄選項,蘋果這個系統級的筆記應用可能會成爲生成式AI落地的一個關鍵應用。

這對於學生上課記筆記以及商務人士參加會議來說都會是一大福音。

蘋果希望利用AI技術提升自家幾個核心應用程序的效率。目前蘋果正在測試這些功能,準備在今年的iOS 18中發佈,當然,這些功能也會被用於macOS以及iPadOS中。

據報道,轉錄和摘要功能只是蘋果今年AI升級的一部分,預計類似的摘要功能也會應用於Safari瀏覽器、消息(Messages)應用中。

Safari將支持網頁總結,而消息應用則可以提供消息內容的“濃縮版”。

雖然蘋果計劃在端側運行AI,但音頻轉錄和高級AI摘要可能暫時仍然需要雲端的輔助。

六、生成式AI或顛覆iOS和安卓,蘋果iPhone怕“變磚”

生成式AI新技術的到來,爲何會讓蘋果如此“緊張”?據兩位熟悉蘋果高管想法的人士透露,蘋果高管擔心生成式AI會威脅到蘋果在全球智能手機市場中的主導地位,因爲生成式AI所能夠創造的“新生態系統”可能會徹底取代當下的智能手機操作系統,包括iOS和安卓。

值得一提的是,目前國內有榮耀這樣的手機廠商已經提出手機操作系統需要用AI“重做一遍”,可以看到,生成式AI對智能手機這類產品的影響,一定是深入操作系統底層的。在這點上,頂級科技巨頭們“不謀而合”。

基於新的生成式AI技術實現的AI,如今也被稱爲“智能體”,這個智能體實際上就是一個“AI應用生態系統”,它可以直接幫用戶打車、安排日程,調用各種服務接口、調用各種大模型能力,這會削弱蘋果App Store的地位,用戶可能不再需要通過下載App來獲取服務了。

蘋果應用商店的年銷售額約爲240億美元,這對蘋果來說無疑是一個“動家底”的大事。

除了擔心應用商店的大蛋糕被動,蘋果另一大擔憂是,如果不能開發出自己的AI系統,跟其他競爭對手的產品相比,iPhone可能會失去競爭力,變成一塊“笨磚頭(dumb brickr)”。

目前iPhone的年銷售額超過了2000億美元,蘋果一家獨佔全球智能手機市場85%的利潤,iPhone,是蘋果的根基所在。

七、內部調整聚焦AI,人才仍是蘋果AI的“短板”

AI掉隊的這種緊迫感讓蘋果這一年多以來動作頻頻,比如此前蘋果取消了耗資百億美元的自動駕駛汽車項目,將原項目中的數百名工程師轉移至AI研發團隊。

據兩位知情人士透露,蘋果還在探索和開發使用iPhone和Mac芯片的服務器,簡單來說,蘋果要用自己的自研芯片做自己的AI服務器,把A系列芯片和M系列芯片用在服務器裡,讓未來產品所用到的雲端AI功能跑在真正“可以被蘋果掌控”的服務器上。

這樣一來,蘋果終端產品和雲端服務器從硬件芯片層面來說也可以有更好的一致性。

當然,這樣做也可以幫蘋果省下一大筆錢。

據彭博社報道,此前蘋果發佈的M2 Ultra或成爲蘋果首個AI服務器芯片。

雖然蘋果目前的節奏有些慢了,但蘋果做AI的優勢還是很明顯的,首先,蘋果在全球有20多億部iPhone,蘋果可以將新的AI產品應用在這些設備上。

同時,蘋果有着強大的芯片團隊,他們可以爲AI功能解決算力之憂。

據報道,蘋果在過去的十年裡,一直在努力開發AI相關技術,建立自己的“全面的AI戰略”,但Siri從發佈以來就沒有什麼重大進展。

John Burkey曾經爲蘋果Siri工作了兩年,離開蘋果後他創立了一個生成式AI公司Brighten.ai,他說,Siri團隊沒有獲得蘋果內部其他團隊所獲得的那種關注和資源。“這不是蘋果的基因,這是一個盲點。”Burkey說道。

多年來,蘋果一直在招攬AI方面的人才,收購AI領域的高價值創企,但蘋果同樣面臨着非常嚴重的AI人才流失問題。

據報道,AI人才離開的一個重要原因可能是蘋果過於嚴格的保密措施,蘋果在AI方面發表的論文要遠少於谷歌、Meta、微軟等公司,2020年離開蘋果重返卡內基梅隆大學的頂尖AI研究員Ruslan Salakhutdinov就表達了自己當時渴望重回學術界的想法,他希望去一個研究所,去一個更“Open”的地方工作。

雖然最近幾個月蘋果發表的AI相關論文略有增加,但一些AI領域的大佬對這些論文的價值提出了質疑,認爲這些論文更多是一些“面子工程”,而不是真正可以讓蘋果落地在產品中的研究。

結語:軟硬件生態並行,蘋果AI大招蓄勢待發

從各路爆料信息來看,蘋果Siri的一系列重磅生成式AI升級、iOS 18中即將加入的各類生成式AI功能,以及蘋果與OpenAI、谷歌等公司的密切商談,都表明了蘋果對AI的重視,並且我們能夠看到蘋果做AI是多線出擊、全方位佈局,從軟件、硬件、操作系統到三方合作,蘋果都在緊鑼密鼓做着準備。

Siri多年來的“不瘟不火”,或許即將成爲歷史,蘋果將與谷歌、亞馬遜等科技巨頭一樣,用大模型重塑智能語音助手。

接下來,蘋果將在6月的WWDC上交出一份怎樣的答卷,不僅關乎蘋果自身AI及整個業務盤的發展,更關係到整個消費電子產業後續如何應用AI,很多企業都在以蘋果爲標杆。

當然,國內不少智能手機領域的頭部玩家都已經行動多時,各類生成式AI功能早已落地,後來者蘋果能否真正帶來一些改變行業的新玩法,值得期待。