Siri AI 已經改變了我使用 iPhone 的方式
iOS 27 公開測試版釋出,Siri AI 作為可選測試功能備受矚目。本文作者體驗後發現,Siri AI 能透過理解自然語言跨應用執行任務,如查詢演唱會日程、從郵件新增日曆事件。但當前僅限於蘋果自家應用,第三方支援需等到正式版。儘管存在一些識別錯誤和詞彙關聯問題,Siri AI 已顯著改變了作者的使用習慣。
iOS 27 今天釋出了首個公開測試版,正式走出開發者領域。自六月初以來,我一直在測試這個新作業系統,尋找其中的怪癖,並檢驗它能否兌現蘋果在主題演講中承諾的 hype。
今年的 iOS 升級堪稱一次 Snow Leopard 式更新。這意味著它新功能不多,而是專注於修復問題並加速整個系統的執行。應用啟動、照片搜尋和 AirDrop 傳輸都應該更快。資訊應用現在支援內聯回覆和 RCS 訊息的端到端加密。Liquid Glass 變得更加精緻,在硬邊和文字周圍的可讀性更好。這些都是很棒的更新,尤其是對於使用老舊 iPhone 的使用者。但此次更新中最大、最受期待的變化是:蘋果終於、真正地推出了改進後的 Siri AI,以可選測試版的形式。而這一次,我認為蘋果可能真的做到了,或者說,至少為成功的 Siri 打下了基礎。
上週,我正猶豫是否來得及去城裡聽一場免費音樂會。演出有四小時,三個樂隊,我只想看其中一個。活動頁面上找不到樂隊演出順序,這正好是測試 Siri AI 的絕佳機會。於是我從螢幕頂部向下滑動,問道:“這些樂隊按什麼順序演出?”Siri 轉了幾秒鐘它的新小輪子,然後正確告訴了我希望的資訊:我想看的樂隊最後一個演出。
新 Siri AI 的承諾是改變你使用手機的方式。以前,你開啟一個應用並告訴它你想做什麼(叫車、設定時器、點午餐);現在,你先說出你想做什麼,Siri AI 會嘗試瀏覽所有可用的應用和資訊來處理其餘部分。所以當我問音樂會時,Siri 檢視了網頁上的內容,然後搜尋網路,找到答案並呈現給我。我不需要在瀏覽器標籤頁之間跳轉,也不需檢視樂隊的 Instagram 頁面;答案就在那裡。
在我使用 Siri AI 的一個月裡,它以多種方式讓我驚喜。在蘋果開發者大會期間測試測試版的第一天,我就能夠問:“你能把我的 WWDC 簡報新增到日曆嗎?”Siri 檢視了我的郵件,解析了資料,並正確地將六個獨立事件新增到了我的日曆中。不過我得說明,它只能新增到蘋果日曆,但稍後會解釋原因。
這些互動確實在一定程度上改變了我。現在,我幾乎總是先嚐試使用 Siri,看看它是否能執行我需要操作或回答簡單問題。這幾乎讓我不再開啟瀏覽器,因為從螢幕頂部下滑輸入指令更簡單、更快、也更愉悅。
螢幕感知功能可能是對我最有幫助的新增。能夠詢問 Siri 關於螢幕上的內容,節省了我很多點選操作。當它能基於螢幕感知執行操作,比如將事件新增到日曆或導航到螢幕上的地址時,效果更佳。
不出所料,Siri 大多能按我的要求執行任務,當它完成較為複雜的任務時,感覺就像魔法。但當它遇到障礙時,我不禁想起為什麼還需要一些努力才能達到“它就能正常工作”的境界——那時 Siri 不工作才是例外,而非常態。
[圖片:Siri AI 仍有瑕疵。第一張圖中,Siri 沒有識別出我的請求涉及當前頁面,而是新增了一個通用提醒。]
Siri 將你的請求轉化為具體操作的能力似乎是蘋果仍在解決的主要問題之一。例如,當我看著演唱會頁面說“提醒我在這些票開售時購買它們”時,它只是建立了一個名為“在這些票開售時購買它們”的提醒。我必須小心地說“購買此活動的票開售時”才能觸發 Siri 真正檢視我的螢幕並搜尋網路獲取票務資訊。而且大多數時候,要求 Siri “route”我到某個位置沒有反應,但“direct”卻可以。隨著更多資料的積累,它的詞彙相關性可能會改善,但當整個目標是用自然語言與電腦對話而非依賴關鍵詞時,這很令人沮喪。
目前,如果你在 iOS 27 測試版中體驗 Siri AI 預覽,只有蘋果應用能使用 Siri 的新能力。如果你生活在蘋果生態系統中,一切都很棒。你的資料可能存在於資訊、郵件和照片中,當你想採取行動時,你會新增到提醒和備忘錄中。我每天使用其中一些應用,當它們協同工作時,比如從郵件新增事件到日曆,確實像是對未來的驚鴻一瞥。但如果我問 Siri “Daniel 說他什麼時候有空玩 Dota?”,Siri 毫無頭緒,因為我和 Daniel 只在 Telegram 上聊天,而系統無法訪問它。
[圖片:蘋果影片中展示開發者如何與 Siri AI 整合。]
開發者需要為 Siri AI 支援實現的兩個主要更新是實體和意圖。實體代表應用可以包含的資料型別,如照片、食譜、播放列表或筆記。如果應用向 Siri AI 新增實體,Siri 就能確切知道可以從該應用獲取哪種資料型別用於個人上下文。相反,意圖告訴 Siri 可以用那些資料做什麼,比如播放、儲存或刪除。應用實體和意圖讓 Siri 能夠控制和從中拉取資料,而 Siri 的語義層處理對你語言的理解。應用的實體和意圖允許這些語義控制和從中獲取資料。
如果你的數字生活大多在蘋果應用之外,那麼你需要的應用與 Siri AI 良好配合還需時日。在公開測試版期間肯定無法實現。開發者現在可以按照 iOS 27 SDK 構建實體和意圖,但在 SDK 本身結束測試之前,作為使用者你是無能為力的;他們無法在 iOS 27 正式版秋季釋出之前嚮應用推送 Siri AI 更新。
蘋果非常依賴開發者更新他們的應用以支援新 Siri,但這並非前所未見。幾乎每次蘋果新增重要新功能時,比如深色模式或 iPad 應用,開發者都需要做些工作才能讓它們正常執行。我想區別在於,之前大多數更新直接影響了開發者自己應用內的使用者體驗。而這次,蘋果要求開發者更新他們的應用以改善 Siri 體驗。
[圖片:iOS 27 中呼叫 Siri AI。]
與我交談過的開發者告訴我,雖然他們對這些新能力非常興奮,但更新應用以支援它們是一項相當龐大的工程。“開發者的概念挑戰在於為應用內的每個螢幕和功能建立全面支援,”曾在 Workflow(後被蘋果收購成為 Shortcuts)工作的 Matthew Cassinelli 說。“但向基於代理的模型過渡,允許專業應用動態呈現相關資料,這使它們對使用者更有用,否則使用者可能不常開啟那些特定應用。”
一個例子是 LookBack: Contacts History 應用。該應用顯示你最近新增的手機聯絡人,如果你忘記開啟它,但問 Siri “我上週在會議上遇到了誰?”,它就可以利用該應用提供資訊。
我能夠接受 Siri 將幫助小型應用被使用者更頻繁地使用這個論點,尤其是對於那些不是人們每天使用的五六款應用的小型開發者。但我心中更大的問題是,像 Google 這樣的玩家是否有興趣讓 Siri 變得更強大。Google 的大部分收入來自廣告展示,如果 Siri 無需你開啟 Gmail 就能找到資訊,而是簡單地在螢幕頂部呈現,Google 就會損失那部分收入。但話說回來,Google 幾乎在用 AI 概覽做同樣的事情,所以很明顯它已經在為 AdSense 收入不再是主要來源的世界做準備。
我能預見到 Google 全面支援 Siri AI 的主要激勵因素是消費者選擇。如果某個郵件應用完全支援 Siri AI 而 Gmail 不支援,我更有可能使用其他應用。我希望 Siri 繼續提供這些體驗,拉取我的個人上下文併為我執行操作。如果我在某個應用上開始遇到障礙,我可能會開始尋找替代品。Google 自身強勢地位是否足以留住大多數人,則是另一個問題。
這一切都還在進行中。這不僅是測試版作業系統,還是測試版 Siri。而且這只是我們被告知將來會有的完整體驗的一部分。它令人印象深刻,但真正重要的還在後面。開發者需要新增對 Siri AI 的支援才能發揮其潛力。而 Siri AI 需要更頻繁地正確路由和研究你的請求,而不是被絆倒。到目前為止,我對它所能做的感到驚訝。
順便說一句,音樂會很棒。
攝影:David Imel / The Verge