蘋(píng)果AI劃時(shí)代登場(chǎng)：整合GPT-4o、Siri全面進(jìn)化、每個(gè)系統(tǒng)都能用

 

凌晨的WWDC上，蘋(píng)果全部6大系統(tǒng)更新，還配上了40分鐘的AI計(jì)劃圖。全程干貨滿(mǎn)滿(mǎn)，信息點(diǎn)多得人都有點(diǎn)喘不過(guò)氣來(lái)。

提起近幾年的WWDC，你都能想到什么？除了作為one more thing登場(chǎng)的Vision Pro以外，能讓人記起的實(shí)在是不多。鎖屏自定義、OCR文字識(shí)別、Widget組件登場(chǎng)——iOS的更新逐漸成了一系列小升級(jí)的集合。它們都看起來(lái)挺酷，但用處挺少，就像2022年的靈動(dòng)島。

不僅iOS陷入了這樣的困境，安卓系統(tǒng)也是。在今年5月的I/O大會(huì)上，連谷歌自己都坦誠(chéng)說(shuō)近幾年實(shí)在沒(méi)什么變化——底層技術(shù)沒(méi)有大的發(fā)展，系統(tǒng)產(chǎn)品上也就只能止于“雕花”。

但現(xiàn)在，新的可能橫掃一切科技產(chǎn)品的技術(shù)革新總算來(lái)了。我們也因此看到了這一場(chǎng)號(hào)稱(chēng)iOS”史上最大更新“的發(fā)布會(huì)。

除了過(guò)癮以外，在這次發(fā)布會(huì)上，你才真的感覺(jué)AI時(shí)代來(lái)了。

 

 

谷歌和微軟夾擊下，在A(yíng)I策略上一直處于被動(dòng)的蘋(píng)果，憑借著其對(duì)系統(tǒng)的深入理解在這次WWDC上甚至帶來(lái)了一絲反超的意味。

小到圖像、相冊(cè)、以及備忘錄，郵件，大到Siri系統(tǒng)的革新，AI帶來(lái)的改變幾乎無(wú)處不在。蘋(píng)果試圖將這一新獲得的能力，最大化的運(yùn)用在它已有的系統(tǒng)之內(nèi)。

下面我們就來(lái)看看，蘋(píng)果到底是如何將AI帶進(jìn)它的系統(tǒng)里去的。

 

 

蘋(píng)果WWDC24全程回顧：iOS 18正式發(fā)布，超強(qiáng)個(gè)人化AI登場(chǎng)

 

 

6大OS齊更新，AI潤(rùn)物無(wú)聲

蘋(píng)果先快速梳理了一下6大OS的更新，其新功能里那些復(fù)雜的理解、推測(cè)，信息整合處處都透出了AI的影子。

 

 

visionOS 2

 

首先登場(chǎng)的是備受關(guān)注的VisionPro最新系統(tǒng)：visionOS 2。Vision Pro團(tuán)隊(duì)負(fù)責(zé)人Mike Rockwell表示，在過(guò)去的時(shí)間里，Vision Pro和visionOS為廣大用戶(hù)的娛樂(lè)、工作和協(xié)作，解鎖了眾多新可能。而開(kāi)發(fā)者們，也從Vision Pro里汲取了更多的靈感，這在其他平臺(tái)上是無(wú)法實(shí)現(xiàn)的。

Mike Rockwell介紹稱(chēng)，截至目前，已有2000多款專(zhuān)為Vision Pro打造的應(yīng)用程序，而兼容iPhone和iPad的應(yīng)用也已超過(guò)150萬(wàn)個(gè)。

 

 

本次全新升級(jí)的visionOS 2帶來(lái)了空間照片功能。現(xiàn)在通過(guò)AI計(jì)算分析，visionOS 2就可以把圖庫(kù)中的所有2D圖像轉(zhuǎn)化成空間3D實(shí)景尺寸的圖像。

除此以外，visionOS 2整體的交互也有所升級(jí)，提供了更多快捷手勢(shì)，讓你只需點(diǎn)擊即可導(dǎo)航到主屏幕，并且你還可以翻轉(zhuǎn)手以調(diào)出控制中心、通知、Mac虛擬現(xiàn)實(shí)器等常用功能。據(jù)悉，今年晚些時(shí)候，這個(gè)Mac虛擬現(xiàn)實(shí)器功能還將擁有更高的分辨率、更大的尺寸。它甚至能進(jìn)一步延展成環(huán)繞的超寬屏，寬度相當(dāng)于兩臺(tái)4K顯示器并排擺放。

 

 

不僅如此，visionOS 2還新添加了旅程模式，讓你在旅途中更好的享受大屏觀(guān)看電影或工作體驗(yàn)。

剛才提到，在過(guò)去一年里，visionOS上有2000多款應(yīng)用為Vsion Pro專(zhuān)門(mén)打造。為了更多更好的應(yīng)用不斷涌現(xiàn)，蘋(píng)果在開(kāi)發(fā)者端還提供了更多API，包括制作TabletopKit和可以加載企業(yè)軟件的API，為企業(yè)工作和App的創(chuàng)作的提供了更好工具。

 

 

而為了提升其空間視頻的制作，蘋(píng)果還與Cannon聯(lián)合，推出全新的EOS R7鏡頭可用于拍攝空間視頻，并給Vemeo、 Final cut提供空間視頻剪輯能力。此外，蘋(píng)果沉浸式視頻（180 度 8K 格式）與 Blackmagic 和 達(dá)芬奇達(dá)成新合作，由后兩者提供更專(zhuān)業(yè)的拍攝和調(diào)色的工具。有了這些工具，紅牛正在制作沉浸式體育系列節(jié)目，它們也會(huì)在蘋(píng)果TV上登陸。

 

 

蘋(píng)果宣布，Vision Pro會(huì)新向8個(gè)國(guó)家和地區(qū)發(fā)售，首先是中國(guó)大陸、日本和新加坡，發(fā)售日期為6月28日。其次是澳大利亞、加拿大、法國(guó)、德國(guó)和英國(guó)，發(fā)售日期為7月12日。

 

 

iOS 18

 

 

除了visionOS 2和Vision Pro在國(guó)內(nèi)發(fā)售的消息以外，蘋(píng)果在WWDC上也正式公布了iOS 18。全新的iOS 18對(duì)控制中心、照片、隱私控制等方面進(jìn)行全面優(yōu)化。

 

 

蘋(píng)果的軟件副總裁 Craig Federighi 展示了iOS 18的一系列更新。首先是可定制的主屏幕，可以讓你自由地將應(yīng)用程序圖標(biāo)放置在你想要的任何位置。例如，你現(xiàn)在可以把喜愛(ài)的墻紙、應(yīng)用程序和各種小組件添加到主屏幕中。而且，蘋(píng)果還帶來(lái)了全新的深色外觀(guān)模式，來(lái)匹配你想要的桌面色調(diào)和風(fēng)格。

此外，蘋(píng)果還對(duì)控制中心進(jìn)行了升級(jí)，你現(xiàn)在不僅能夠在多個(gè)控件之間滑動(dòng)，而且蘋(píng)果還面向開(kāi)發(fā)者推出了新的控制API，可以把你認(rèn)為最重要的功能在最顯著的位置展示，甚至你可以在鎖屏狀態(tài)下，將相機(jī)和手電筒換成其他功能。

 

在安全隱私方面，iOS 18現(xiàn)在可以單獨(dú)鎖定某一個(gè)應(yīng)用，讓它需要通過(guò)驗(yàn)證才能打開(kāi)，在一定程度上增強(qiáng)了隱私保護(hù)。而且，如果你有哪個(gè)應(yīng)用程序不想被別人知道，現(xiàn)在你可以把它藏起來(lái)，放到一個(gè)新的帶鎖的隱藏APP文件夾里。

 

 

全新的iOS 18還可以在信息回復(fù)中更加更多的表情符號(hào)，并且將有粗體、下劃線(xiàn)、刪除線(xiàn)和斜體的新格式展示。

 

對(duì)于日常大家常用的照片功能來(lái)說(shuō)，為了與 Android 上的 Google Photos 進(jìn)行強(qiáng)有力的競(jìng)爭(zhēng)，蘋(píng)果對(duì)iOS 18 中的照片應(yīng)用進(jìn)行了大規(guī)模的優(yōu)化。其中，就包括人臉識(shí)別分類(lèi)、照片集置頂?shù)纫幌盗锌旖菰L(fǎng)問(wèn)功能。蘋(píng)果將人工智能引入到了照片應(yīng)用，讓你能夠使用自然語(yǔ)言搜索照片。當(dāng)然，你還可以清理圖片背景中的物體，類(lèi)似于“路人消除”的功能。

 

 

此外，蘋(píng)果還在iPhone 中增加了衛(wèi)星通信，在沒(méi)有無(wú)線(xiàn)局域網(wǎng)或蜂窩網(wǎng)絡(luò)的情況下，允許通過(guò)衛(wèi)星進(jìn)行信息發(fā)送。

 

 

在支付方面，為了進(jìn)一步幫你替換實(shí)體錢(qián)包，蘋(píng)果推出了Tap to Cash功能。這是一種快捷又私密的Apple Cash轉(zhuǎn)賬方式，無(wú)需共享電話(huà)號(hào)碼或電子郵件地址。有了Tap to Cash，只需將你們兩個(gè)的手機(jī)靠近即可完成支付。

另外，iOS 18還有一項(xiàng)重要的更新：蘋(píng)果宣布支持 RCS ，確認(rèn)它將隨 iOS 18一起推出。不過(guò)，除此之外，蘋(píng)果并未透露任何其他細(xì)節(jié)。

 

macOS

 

 

在WWDC24上，蘋(píng)果正式公布了macOS 15 Sequoia，其中包括Apple Intelligence、iPhone 鏡像、跨平臺(tái)密碼應(yīng)用程序等等。開(kāi)發(fā)者測(cè)試版現(xiàn)已發(fā)布，公開(kāi)測(cè)試版將于 7 月發(fā)布，完整版將于 2024 年秋季發(fā)布。

蘋(píng)果介紹稱(chēng)，macOS Sequoia包含有Apple Intelligence，這是一套適用于iPhone、iPad和iOS 的AI功能。比如，蘋(píng)果在WWDC上演示的寫(xiě)作功能。它可以總結(jié)電子郵件和其他應(yīng)用程序中的文本，并自動(dòng)進(jìn)行電子郵件的撰寫(xiě)和回復(fù)。而且有了Apple Intelligence，Siri現(xiàn)在也可以通過(guò)語(yǔ)音提取上下文信息進(jìn)行回復(fù)。

蘋(píng)果宣布，Apple Intelligence 將于“今年夏天”與Sequoia測(cè)試版一起推出，但是想要設(shè)備擁有這一功能需要M1或更高版本的處理器。

 

 

 

另外，全新的macOS 15 Sequoia中還擁有iPhone鏡像（iPhone Mirroring）功能，可讓你通過(guò)Mac來(lái)控制你的手機(jī)。在演示中我們看到，通過(guò)iPhone Mirroring，你的iPhone屏幕可以完全鏡像到Mac上，并且你可以通過(guò)觸摸板，像操作手機(jī)一樣來(lái)滑動(dòng)屏幕，甚至可以通過(guò)Mac鍵盤(pán)在手機(jī)上進(jìn)行打字。

 

 

本次Safari也迎來(lái)了更新，新功能包括使用機(jī)器學(xué)習(xí)來(lái)檢測(cè)和總結(jié)頁(yè)面上的重點(diǎn)信息，生成摘要和目錄。而且，它還為頁(yè)面視頻內(nèi)容提供了畫(huà)中畫(huà)模式。

 

 

macOS 15 Sequoia還新增一個(gè)跨平臺(tái)的Passwords應(yīng)用，可以存儲(chǔ)多種新類(lèi)型的帳戶(hù)信息，包括Wi-Fi密碼、密鑰、驗(yàn)證碼和共享密碼等等。它將在iOS、iPad、Mac、visionOS和Windows上使用。

 

tvOS

WWDC24中，蘋(píng)果還宣布對(duì)tvOS進(jìn)行了優(yōu)化，為你觀(guān)看電視帶來(lái)了全新的體驗(yàn)。

 

 

 

蘋(píng)果介紹稱(chēng)，Apple TV+引入了一項(xiàng)全新功能InSight。它可以讓你在觀(guān)看Apple Originals節(jié)目或影片時(shí)，只需在遙控器上向下輕掃就會(huì)實(shí)時(shí)顯示演員及其角色名稱(chēng)。而且，如果你對(duì)正在播放的歌曲感興趣，你也可以快速查看曲目并將其添加到Apple Music播放列表中。

音頻方面，tvOS的增強(qiáng)對(duì)話(huà)功能可利用機(jī)器學(xué)習(xí)技術(shù)來(lái)提高人聲清晰度，確保演員的對(duì)白始終聽(tīng)得清楚，而且字幕也會(huì)智能添加，當(dāng)你暫?；蚧胤攀?，它會(huì)自動(dòng)彈出字幕。目前，這個(gè)全新的增強(qiáng)對(duì)話(huà)功能可以適用于電視、音響以及AirPods和其他藍(lán)牙設(shè)備。

此外，搭載了全新tvOS的Apple TV還新增21：9寬銀幕模式，可以截取Apple TV劇集中的精彩畫(huà)面做屏保。

 

 

除了在電視上對(duì)音頻的優(yōu)化以外，蘋(píng)果還把新的音頻技術(shù)應(yīng)用到了AirPods和游戲上。

在易用性方面，蘋(píng)果表示，未來(lái)你所使用的AirPods在配合Siri應(yīng)用時(shí)將更加簡(jiǎn)單方便——免提體驗(yàn)絲滑又順暢。比如當(dāng)你在公交車(chē)上不方便開(kāi)口回應(yīng)Siri時(shí)，有了新的音頻功能，只需要你稍微點(diǎn)點(diǎn)頭或搖搖頭，AirPods就知道你要做什么。

另外，AirPods還加入了全新的語(yǔ)音突顯功能，可以在各種嘈雜的環(huán)境下，消除周?chē)谋尘霸胍?，清晰的接?tīng)電話(huà)。

值得一提的是，AirPods進(jìn)一步對(duì)空間音頻進(jìn)行了優(yōu)化，號(hào)稱(chēng)可以帶給你前所未有的沉浸感，提升游戲體驗(yàn)。

蘋(píng)果表示，這個(gè)升級(jí)后的空間音頻技術(shù)，將在騰訊游戲和EA聯(lián)合出品的Need for Speed Mobile首批加入，并于今年秋季推出。

 

watchOS

在WWDC24中，蘋(píng)果還帶來(lái)了全新的watchOS 11。在運(yùn)動(dòng)、健康監(jiān)測(cè)以及智能應(yīng)用方面再次升級(jí)。

 

 

在運(yùn)動(dòng)方面，watchOS 11加入了全新的訓(xùn)練負(fù)荷功能。訓(xùn)練負(fù)荷功能可以通過(guò)你的訓(xùn)練強(qiáng)度和時(shí)長(zhǎng)，配合心率、配速和高度這些熱量值數(shù)據(jù)，結(jié)合年齡、體重等個(gè)人數(shù)據(jù)，通過(guò)新的算法自動(dòng)將傳感器數(shù)據(jù)，轉(zhuǎn)為對(duì)你訓(xùn)練的耗能評(píng)分。打分從1-10，看你是否真的竭盡了全力。充分了解自己、了解自己的運(yùn)動(dòng)強(qiáng)度——蘋(píng)果稱(chēng)，這是watchOS 11中幫助你保持活力的新方式。

 

 

此外，蘋(píng)果還帶來(lái)了全新的Vitals App。這款應(yīng)用可以通過(guò)你歷史以往的心率、睡眠呼吸頻率以及手腕溫度等信息的對(duì)比，判斷你當(dāng)前的身體狀況，只要有不合格的指標(biāo)超出，你就會(huì)馬上得到提醒。

 

 

在全新的watchOS 11中，蘋(píng)果針對(duì)智能疊放功能也進(jìn)行了升級(jí)。蘋(píng)果稱(chēng)，它會(huì)變得更加智能，各種小組件能在你需要時(shí)自動(dòng)出現(xiàn)，比如快下雨時(shí)會(huì)有降水預(yù)測(cè)小組件來(lái)提醒你、出國(guó)旅行時(shí)會(huì)有翻譯小組件在旁協(xié)助。

而且，智能疊放功能還增加了類(lèi)似“報(bào)平安”的新功能。比如，當(dāng)你和朋友聚會(huì)后，讓你的朋友知道你已經(jīng)安全到家；當(dāng)你外出夜跑時(shí)，可以給你的朋友同步的信息等等。

 

 

還有一個(gè)比較有趣的是，現(xiàn)在新的watchOS 11還能幫你找到最適合你表盤(pán)的照片了。通過(guò)機(jī)器學(xué)習(xí)，系統(tǒng)能夠通過(guò)面部表情、畫(huà)面美感以及構(gòu)圖等等，智能的識(shí)別、評(píng)估和精選出最佳照片用于你的表盤(pán)設(shè)置。顯然，這對(duì)于選擇困難癥的你來(lái)說(shuō)，可能是一個(gè)不錯(cuò)的功能。

 

iPadOS

本次iPadOS 18升級(jí)涵蓋了iOS中的主要更新，包括個(gè)性化設(shè)置，自定義控制中心和照片重溫功能。

本次升級(jí)中最重磅的就是iPadOS對(duì)App的重新布局，現(xiàn)在iPad里的應(yīng)用都按照App名+浮動(dòng)標(biāo)簽欄的模式展示，在其中你可以調(diào)節(jié)你想用的功能/內(nèi)容。而且在進(jìn)入內(nèi)容后，標(biāo)簽欄也可以變成側(cè)邊欄。

 

 

同播共享（SharePlay）更新，可以遠(yuǎn)程控制家人的系統(tǒng)，還可以把自己在iPad上的展示涂鴉分享給家人。

蘋(píng)果還帶來(lái)了新的計(jì)算器升級(jí)，添加了Math Note系統(tǒng)?？梢岳肞encel直接手寫(xiě)數(shù)學(xué)算式，然后直接幫助你計(jì)算出結(jié)果，甚至能幫你計(jì)算復(fù)雜公式，并且可以理解所有不等式里的變量變化。還可以給出對(duì)應(yīng)的函數(shù)圖像。

MathNote寫(xiě)出的內(nèi)容可以直接同步到新的備忘錄里。

 

 

除此以外，筆記還推出了新功能Samrt Script，它將利用強(qiáng)大的“設(shè)備端機(jī)器學(xué)習(xí)風(fēng)格”讓手寫(xiě)更好、更流暢、更直、更清晰。寫(xiě)字不好看再也不用愁。用戶(hù)可以將文本粘貼到手寫(xiě)筆記中，它會(huì)顯示在你的手寫(xiě)內(nèi)容中。它還可以更好地識(shí)別你的筆記意圖，支持手寫(xiě)內(nèi)容的拼寫(xiě)檢查、文本換行和復(fù)制粘貼。比如你可以通過(guò)劃掉直接刪除你的筆記，還可以隨意變化筆記中位置，為新的筆記騰出空間。

 

 

 

 

蘋(píng)果的大計(jì)劃亮相：Apple Intelligence路線(xiàn)圖公布，隱私成重點(diǎn)

在介紹蘋(píng)果Apple Intelligence之前，庫(kù)克先講了蘋(píng)果使用AI的原則“我們希望帶來(lái)的結(jié)果能展現(xiàn)出我們產(chǎn)品的核心原則，它必須足夠強(qiáng)大，能在各種要緊事上幫到你，也必須直觀(guān)易用，還要深度整合到產(chǎn)品的使用體驗(yàn)中。更重要的是，它必須能懂你，并以你的個(gè)人情境為基礎(chǔ)，比如日常安排、人際關(guān)系、溝通交流等。另外，它必須從設(shè)計(jì)之初就注重隱私保護(hù)。“

接著庫(kù)克總結(jié)道：“所有這些加在一起，就不止人工智能那么簡(jiǎn)單，這就是個(gè)性化智能，也是Apple接下來(lái)的重要一步。”

蘋(píng)果高級(jí)副總裁Craig表示Apple Intelligence這項(xiàng)智能技術(shù)的真正獨(dú)特之處是能理解你的個(gè)人情境。它根據(jù)你的個(gè)人數(shù)據(jù)，你現(xiàn)在打開(kāi)的頁(yè)面等背景，調(diào)用多種Agent能力理解你的需求，并完成你的目標(biāo)。比如當(dāng)你說(shuō)想去為你家人接機(jī)時(shí)，它可以同時(shí)調(diào)用郵件里，航班資訊等一系列信息，并調(diào)出地圖告訴你怎么去想去的地方。蘋(píng)果將之命名為個(gè)人情景感知。

 

 

這不禁讓人想到了微軟前幾天公布的回憶（Recall）功能，它引發(fā)了大家對(duì)于隱私的極大焦慮。但對(duì)于蘋(píng)果來(lái)講，這似乎不是什么問(wèn)題。它提供了兩種解決方案，首先是能在端內(nèi)運(yùn)行的大模型功能就會(huì)僅通過(guò)端側(cè)AI運(yùn)行，蘋(píng)果只在端內(nèi)收集信息而不會(huì)傳送到云端。大多數(shù)AI功能都可以完全在端側(cè)完成，這主要是蘋(píng)果的超強(qiáng)芯片的功勞。深度集成的生成模型需要巨大的處理能力。

 

 

其次，如果是復(fù)雜到非要用云端模型的話(huà)，其云端模型都不可以不經(jīng)你同意就存儲(chǔ)相關(guān)信息。為了保證你的云端使用和信息安全，蘋(píng)果還打造了私人云端計(jì)算。這些模型都會(huì)在他們使用 Apple Silicon 專(zhuān)門(mén)創(chuàng)建的服務(wù)器上運(yùn)行，因此也擁有極強(qiáng)的隱私保護(hù)功能。在這里你的數(shù)據(jù)絕不會(huì)被長(zhǎng)期儲(chǔ)存，它只用于完成其云端的大模型計(jì)算步驟。在運(yùn)作過(guò)程中，其加密方式將云鎖定到您的手機(jī)。

然而馬斯克表示：根本不信。接了OpenAI，隱私就沒(méi)戲。

 

 

他還進(jìn)一步表示，在他的公司，集成OpenAI的蘋(píng)果將被禁用。

 

 

 

Graig還表示，Apple Intelligence另一個(gè)深刻影響，就是它能跨多個(gè)app執(zhí)行操作，而且它所需工具的各種資源就在你口袋里常用app中，Apple Intelligence能取用這些工具。這正是AI的下一步，作為智能體的AI。而其載體就是Siri。這估計(jì)就是蘋(píng)果灰質(zhì)計(jì)劃（Grey Matter Project）的關(guān)鍵。

Siri的新紀(jì)元

與之前傳言的Siri已死不同，蘋(píng)果官方給出的數(shù)據(jù)時(shí)，它現(xiàn)在一天內(nèi)會(huì)收到高達(dá)15億次的調(diào)用需求。

而新的Siri將更自然，更相關(guān)，更個(gè)人化。它會(huì)和系統(tǒng)進(jìn)行更深入的整合。

這種結(jié)合首先出現(xiàn)在其出場(chǎng)方式上。現(xiàn)在它被喚醒后出來(lái)的不再是那個(gè)氣泡，而是一圈圍繞屏幕的光暈。

 

 

而且它也終于可以記住上下文對(duì)話(huà)了。對(duì)同一件事你不用再反復(fù)提及，說(shuō)代詞就好。

對(duì)于那些不方便說(shuō)話(huà)的場(chǎng)景，Siri現(xiàn)在支持打字了！比如說(shuō)，當(dāng)你感覺(jué)危險(xiǎn)時(shí)，你可以用它悄悄報(bào)警了。

作為最基礎(chǔ)的大模型能力，Siri現(xiàn)在可以作為一個(gè)知識(shí)庫(kù)應(yīng)用，但暫時(shí)只能回答你對(duì)蘋(píng)果功能的疑問(wèn)。

除了以上這些變化之外，其他的Siri升級(jí)都需要等到明年之后。但這些升級(jí)看起來(lái)都相當(dāng)讓人期待。

明年蘋(píng)果將帶來(lái)Siri的屏幕內(nèi)感知功能，它可以看到屏幕上發(fā)生的事情。比如你的朋友向你發(fā)送了他們的地址，你只需說(shuō)“將此地址添加到聯(lián)系人卡片”，它就會(huì)執(zhí)行此操作。

 

 

Siri 將成為一個(gè)可以采取行動(dòng)的智能體，它可以調(diào)用各種App內(nèi)的功能，比如找到照片，調(diào)節(jié)照片。還可以跨應(yīng)用使用。

通過(guò)之前提到的個(gè)人情景感知。Siri也會(huì)通過(guò)你的個(gè)人信息更好的理解和處理你的需求。

而Siri調(diào)用應(yīng)用的能力來(lái)自于蘋(píng)果的App Intents框架，它讓App能定義Siri、快捷指令，以及其他系統(tǒng)體驗(yàn)的一系列操作。而開(kāi)發(fā)者可借助App Intents架構(gòu)定義他們App中的各種操作。

介紹Siri新功能的Kelsey Peterson表示，這次WWDC將會(huì)是Siri的新紀(jì)元。

 

AI在應(yīng)用端

郵箱功能

蘋(píng)果郵箱現(xiàn)在加入了Rewrite 功能，能幫你智能生成文本的多個(gè)版本，并讓你從中選擇。你可以選擇語(yǔ)氣，格式。語(yǔ)氣上可以讓他更正式，更清晰。格式上你甚至可以把邀請(qǐng)改成一首詩(shī)。它還能只改你選擇的一部分，而非全部。

Apple intelligence還提供了總結(jié)，郵件的智能回復(fù)功能?，F(xiàn)在他會(huì)自動(dòng)總結(jié)你的郵件，你在郵箱里看到的就是最重要的總結(jié)。而且它還會(huì)把最近最重要的臨期事件郵件自動(dòng)放在最上方。

這項(xiàng)功能在短信里也一樣，它會(huì)把那些亟待處理的問(wèn)題放在最上面的地方。

 

圖像能力

Genmoji，可以在設(shè)備端用鍵盤(pán)創(chuàng)造最應(yīng)景的Emojii。還可以在多個(gè)被選中選擇。你還可以直接用照片形成Emoji，并將它放進(jìn)你的對(duì)話(huà)里。

 

 

Image Playground，與過(guò)往復(fù)雜的文生圖軟件不同，它更私人化，會(huì)根據(jù)對(duì)話(huà)建議你生成圖像的幾個(gè)關(guān)鍵詞，比如你最近對(duì)話(huà)的朋友。而且你也不用費(fèi)心想Prompt，用幾個(gè)詞生成圖像的預(yù)覽。Image Playground 可在各種應(yīng)用程序中使用，還有一個(gè)專(zhuān)用的 Image Playground 應(yīng)用程序。還有一個(gè)供第三方開(kāi)發(fā)人員使用的 API。

 

 

比如備忘錄里的新增的Image Wand，就是通過(guò)接入Image Playgrund把草圖直接轉(zhuǎn)化成更完整圖像。在這里你用Pencil畫(huà)的草圖加上一些關(guān)鍵詞，就可以生成新的更完整的圖像。

 

相冊(cè)

首先蘋(píng)果補(bǔ)齊了其他安卓手機(jī)都有的魔力筆刷功能，即用生成式AI更改照片。

蘋(píng)果還利用AI提升了搜索能力，現(xiàn)在你可以用自然語(yǔ)言來(lái)找具體的照片。更進(jìn)一步，你甚至可以在一個(gè)視頻里找到特定的段落。

蘋(píng)果還展示了一項(xiàng)非常有趣的延展功能：回憶相冊(cè)。還可以摘取與你需求相關(guān)的照片，自動(dòng)組合成一個(gè)影片，形成關(guān)于這件事所有回憶的相冊(cè)視頻。連音樂(lè)都不用你挑，而是AI直接從Apple Music里選擇最搭配的音樂(lè)。

 

 

除此以外，Notes 和 Phone 應(yīng)用程序也增加了新的 AI 錄音和轉(zhuǎn)錄功能。

 

官宣OpenAI合作，但并不是對(duì)方的唯一

蘋(píng)果還正式宣布了與OpenAI的合作。Siri可以直接調(diào)用ChatGPT，你可以利用Siri和它對(duì)答。在應(yīng)用中，也可以直接調(diào)出ChatGPT，Apple對(duì)模型和應(yīng)用本身進(jìn)行了很好的融合，讓ChatGPT的產(chǎn)出，如大綱，文章能直接顯示在應(yīng)用中。用戶(hù)可在iOS系統(tǒng)中免費(fèi)直接調(diào)用ChatGPT，且不用創(chuàng)建賬戶(hù)。若用戶(hù)已有賬戶(hù)，可以進(jìn)行關(guān)聯(lián)。ChatGPT的融合會(huì)在今年稍后上線(xiàn)。但ChatGPT不會(huì)是唯一一個(gè)和蘋(píng)果合作的大模型公司，蘋(píng)果表示，它準(zhǔn)備整合多個(gè)AI外部模型，避免用戶(hù)需要在不同App間切來(lái)切去。

 

 

開(kāi)發(fā)者用得上的AI才有價(jià)值

Apple Intellengence 的效果如何可能最終還是要看開(kāi)發(fā)者社區(qū)的發(fā)掘。為了讓開(kāi)發(fā)者更好的使用這項(xiàng)功能。蘋(píng)果以全新API和框架更新了SDK，例如，開(kāi)發(fā)者可以將Image Playground加入自己的app，添幾行代碼就行了。Xcode也融合了人工智能能力，幫助開(kāi)發(fā)者更好的在Swift上開(kāi)發(fā)App。

 

 

總之， AI這回在蘋(píng)果的系統(tǒng)里，基本上做到了無(wú)處不在。

 

 

 

結(jié)語(yǔ)

在A(yíng)I風(fēng)起云涌一年半之后，蘋(píng)果總算趕上了這班車(chē)。

看似好像晚了點(diǎn)，但也許是剛好。

在它之前，已經(jīng)有很多安卓系手機(jī)廠(chǎng)商嘗鮮過(guò)了AI。在海外，谷歌去年10月份就公布了第一代AI手機(jī)Pixel 8和其對(duì)應(yīng)的AI系統(tǒng)Android 14；三星今年一月份則打出了AI for All的口號(hào)，S24里塞滿(mǎn)了新AI的功能。國(guó)內(nèi)的手機(jī)廠(chǎng)商更甚，只要是叫得上名的，華為，小米，OPPO，vivo，不論哪家都被AI賦了能。

但仔細(xì)拆解下來(lái)，他們不過(guò)是把大語(yǔ)言模型塞進(jìn)了手機(jī)，讓它作為Chatbot去做總結(jié)，翻譯之類(lèi)它擅長(zhǎng)之事。再試著把其中的生成能力融合進(jìn)一些程序之中。這固然是AI很重要的一個(gè)應(yīng)用方向，但對(duì)于手機(jī)來(lái)講，這只是功能，而非革命。

甚至這些功能中的很多都像近幾年iOS的更新一樣，噱頭大過(guò)實(shí)用性。

但正如庫(kù)克所說(shuō)，能帶來(lái)改變的AI必須足夠強(qiáng)大，能在各種要緊事上幫到你，也必須直觀(guān)易用，還要深度整合到產(chǎn)品的使用體驗(yàn)中。

蘋(píng)果其實(shí)在努力朝這個(gè)方向前進(jìn)。

雖然現(xiàn)在蘋(píng)果的AI功能與競(jìng)品大體相似，但一些比競(jìng)品深一步的設(shè)計(jì)確實(shí)是畫(huà)龍點(diǎn)睛。比如說(shuō)蘋(píng)果在各個(gè)環(huán)節(jié)都提到的智能排序信息體系，它可以把最重要和最緊急需處理的消息優(yōu)先在鎖屏或應(yīng)用場(chǎng)景上排序給你。像馬上需回復(fù)的郵件，天氣預(yù)報(bào)里一小時(shí)后的大雨都可以讓你第一時(shí)間看到并處理，貼心如斯。

在它與應(yīng)用的融合中，許多點(diǎn)看得出來(lái)是真需求，而非炫技。比如Smart Script，能實(shí)現(xiàn)手寫(xiě)內(nèi)容的簡(jiǎn)單擦除、移位，這是利用AI解決掉過(guò)往用戶(hù)體驗(yàn)中痛點(diǎn)。在其圖像生成應(yīng)用Image Playground中，為了給一般用戶(hù)降門(mén)檻，它不需要完整的Prompt，只需要關(guān)鍵詞就能生成。它甚至?xí)鶕?jù)你最近的對(duì)話(huà)給出關(guān)鍵詞建議，懂到你心里。

另外，蘋(píng)果在A(yíng)I上還寄出了它的傳統(tǒng)殺手锏：隱私保護(hù)。

蘋(píng)果對(duì)此無(wú)所不用其極，甚至用上了私人云計(jì)算的服務(wù)確保你在利用AI時(shí)的隱私安全。這毫無(wú)疑問(wèn)屬于后發(fā)優(yōu)勢(shì)，在微軟的Recall 被黑客輕松破解翻車(chē)之后，AI使用方面的隱私安全越來(lái)越成為人們的核心關(guān)切。蘋(píng)果在此處的強(qiáng)調(diào)非常及時(shí)。

最后，蘋(píng)果給AI應(yīng)用落地畫(huà)出的路線(xiàn)圖也比對(duì)手要清晰。它想讓AI系統(tǒng)“能懂你，并以你的個(gè)人情境為基礎(chǔ)。“蘋(píng)果計(jì)劃利用你的所有端側(cè)個(gè)人信息來(lái)讓AI真正成為一個(gè)了解你的個(gè)人助手，而非一個(gè)與你無(wú)關(guān)的問(wèn)答工具。這才是端側(cè)融合的真正意義，也是用戶(hù)想要的和他們真正相關(guān)，有用的AI。而蘋(píng)果希望能達(dá)成的利用AI在多程序間聯(lián)動(dòng)應(yīng)用的目標(biāo)，更是智能硬件的下一個(gè)道標(biāo)。

因?yàn)閷?duì)AI和其他所有智能硬件來(lái)講。一個(gè)更底層的革命，是以AI為中介，讓他作為一個(gè)全能的Agent型助理，改變我們與應(yīng)用的關(guān)系。

這正是蘋(píng)果打算賦予Siri的新使命。

和Siri當(dāng)年一樣，這條路，它是第一個(gè)走的。雖然這一切可能都要在明年才得以實(shí)現(xiàn)，但這確實(shí)是我們想要的，明確的AI未來(lái)。

有很多人認(rèn)為蘋(píng)果這種以AI為中介的系統(tǒng)會(huì)讓蘋(píng)果的App Store生態(tài)崩潰。但其實(shí)并不會(huì)。因?yàn)橹灰狝I還需要調(diào)動(dòng)App來(lái)完成工作，那App的遴選，推薦和使用還是要經(jīng)過(guò)蘋(píng)果。 設(shè)備和系統(tǒng)本身才是App Store的圍墻。

這一步步的改進(jìn)，其實(shí)很冒險(xiǎn)。比如有些功能從現(xiàn)場(chǎng)演示看還是過(guò)于理想化，比如更改郵件排序，這是之前郵件軟件都不敢做的事情。如果出了垃圾郵件被前排放置的情況，其對(duì)蘋(píng)果的影響應(yīng)該不亞于谷歌那些丑聞。

而能處理困難問(wèn)題，跨應(yīng)用的Agent需要更大的算力和更好的模型。這個(gè)畫(huà)了的餅要能實(shí)現(xiàn)，找到效果、需求、成本間的平衡才是最重要的。

因此下一代智能設(shè)備的舞臺(tái)，蘋(píng)果還能不能唱主角。決定的因素可能在6月，而不是9月。

但從今天蘋(píng)果的表現(xiàn)來(lái)看似乎還相對(duì)比較讓人放心。

后來(lái)居上的故事，谷歌沒(méi)演出來(lái)，蘋(píng)果也許能演好。

從這次之后的WWDC，終于又一次讓人真正期待起來(lái)了。

 

 

本文轉(zhuǎn)自于     新浪  蜂鳥(niǎo)