Siri AI 已經改變了我使用 iPhone 的方式
iOS 27 公開測試版發佈,Siri AI 作為可選測試功能備受矚目。本文作者體驗後發現,Siri AI 能通過理解自然語言跨應用執行任務,如查詢演唱會日程、從郵件添加日曆事件。但當前僅限於蘋果自家應用,第三方支持需等到正式版。儘管存在一些識別錯誤和詞彙關聯問題,Siri AI 已顯著改變了作者的使用習慣。
iOS 27 今天發佈了首個公開測試版,正式走出開發者領域。自六月初以來,我一直在測試這個新操作系統,尋找其中的怪癖,並檢驗它能否兑現蘋果在主題演講中承諾的 hype。
今年的 iOS 升級堪稱一次 Snow Leopard 式更新。這意味着它新功能不多,而是專注於修復問題並加速整個系統的運行。應用啓動、照片搜索和 AirDrop 傳輸都應該更快。信息應用現在支持內聯回覆和 RCS 消息的端到端加密。Liquid Glass 變得更加精緻,在硬邊和文字周圍的可讀性更好。這些都是很棒的更新,尤其是對於使用老舊 iPhone 的用户。但此次更新中最大、最受期待的變化是:蘋果終於、真正地推出了改進後的 Siri AI,以可選測試版的形式。而這一次,我認為蘋果可能真的做到了,或者説,至少為成功的 Siri 打下了基礎。
上週,我正猶豫是否來得及去城裏聽一場免費音樂會。演出有四小時,三個樂隊,我只想看其中一個。活動頁面上找不到樂隊演出順序,這正好是測試 Siri AI 的絕佳機會。於是我從屏幕頂部向下滑動,問道:“這些樂隊按什麼順序演出?”Siri 轉了幾秒鐘它的新小輪子,然後正確告訴了我希望的信息:我想看的樂隊最後一個演出。
新 Siri AI 的承諾是改變你使用手機的方式。以前,你打開一個應用並告訴它你想做什麼(叫車、設定時器、點午餐);現在,你先説出你想做什麼,Siri AI 會嘗試瀏覽所有可用的應用和信息來處理其餘部分。所以當我問音樂會時,Siri 查看了網頁上的內容,然後搜索網絡,找到答案並呈現給我。我不需要在瀏覽器標籤頁之間跳轉,也不需查看樂隊的 Instagram 頁面;答案就在那裏。
在我使用 Siri AI 的一個月裏,它以多種方式讓我驚喜。在蘋果開發者大會期間測試測試版的第一天,我就能夠問:“你能把我的 WWDC 簡報添加到日曆嗎?”Siri 查看了我的郵件,解析了數據,並正確地將六個獨立事件添加到了我的日曆中。不過我得説明,它只能添加到蘋果日曆,但稍後會解釋原因。
這些互動確實在一定程度上改變了我。現在,我幾乎總是先嚐試使用 Siri,看看它是否能執行我需要操作或回答簡單問題。這幾乎讓我不再打開瀏覽器,因為從屏幕頂部下滑輸入指令更簡單、更快、也更愉悦。
屏幕感知功能可能是對我最有幫助的添加。能夠詢問 Siri 關於屏幕上的內容,節省了我很多點擊操作。當它能基於屏幕感知執行操作,比如將事件添加到日曆或導航到屏幕上的地址時,效果更佳。
不出所料,Siri 大多能按我的要求執行任務,當它完成較為複雜的任務時,感覺就像魔法。但當它遇到障礙時,我不禁想起為什麼還需要一些努力才能達到“它就能正常工作”的境界——那時 Siri 不工作才是例外,而非常態。
[圖片:Siri AI 仍有瑕疵。第一張圖中,Siri 沒有識別出我的請求涉及當前頁面,而是添加了一個通用提醒。]
Siri 將你的請求轉化為具體操作的能力似乎是蘋果仍在解決的主要問題之一。例如,當我看着演唱會頁面説“提醒我在這些票開售時購買它們”時,它只是創建了一個名為“在這些票開售時購買它們”的提醒。我必須小心地説“購買此活動的票開售時”才能觸發 Siri 真正查看我的屏幕並搜索網絡獲取票務信息。而且大多數時候,要求 Siri “route”我到某個位置沒有反應,但“direct”卻可以。隨着更多數據的積累,它的詞彙相關性可能會改善,但當整個目標是用自然語言與電腦對話而非依賴關鍵詞時,這很令人沮喪。
目前,如果你在 iOS 27 測試版中體驗 Siri AI 預覽,只有蘋果應用能使用 Siri 的新能力。如果你生活在蘋果生態系統中,一切都很棒。你的數據可能存在於信息、郵件和照片中,當你想採取行動時,你會添加到提醒和備忘錄中。我每天使用其中一些應用,當它們協同工作時,比如從郵件添加事件到日曆,確實像是對未來的驚鴻一瞥。但如果我問 Siri “Daniel 説他什麼時候有空玩 Dota?”,Siri 毫無頭緒,因為我和 Daniel 只在 Telegram 上聊天,而系統無法訪問它。
[圖片:蘋果視頻中展示開發者如何與 Siri AI 集成。]
開發者需要為 Siri AI 支持實現的兩個主要更新是實體和意圖。實體代表應用可以包含的數據類型,如照片、食譜、播放列表或筆記。如果應用向 Siri AI 添加實體,Siri 就能確切知道可以從該應用獲取哪種數據類型用於個人上下文。相反,意圖告訴 Siri 可以用那些數據做什麼,比如播放、保存或刪除。應用實體和意圖讓 Siri 能夠控制和從中拉取數據,而 Siri 的語義層處理對你語言的理解。應用的實體和意圖允許這些語義控制和從中獲取數據。
如果你的數字生活大多在蘋果應用之外,那麼你需要的應用與 Siri AI 良好配合還需時日。在公開測試版期間肯定無法實現。開發者現在可以按照 iOS 27 SDK 構建實體和意圖,但在 SDK 本身結束測試之前,作為用户你是無能為力的;他們無法在 iOS 27 正式版秋季發佈之前嚮應用推送 Siri AI 更新。
蘋果非常依賴開發者更新他們的應用以支持新 Siri,但這並非前所未見。幾乎每次蘋果添加重要新功能時,比如深色模式或 iPad 應用,開發者都需要做些工作才能讓它們正常運行。我想區別在於,之前大多數更新直接影響了開發者自己應用內的用户體驗。而這次,蘋果要求開發者更新他們的應用以改善 Siri 體驗。
[圖片:iOS 27 中調用 Siri AI。]
與我交談過的開發者告訴我,雖然他們對這些新能力非常興奮,但更新應用以支持它們是一項相當龐大的工程。“開發者的概念挑戰在於為應用內的每個屏幕和功能創建全面支持,”曾在 Workflow(後被蘋果收購成為 Shortcuts)工作的 Matthew Cassinelli 説。“但向基於代理的模型過渡,允許專業應用動態呈現相關數據,這使它們對用户更有用,否則用户可能不常打開那些特定應用。”
一個例子是 LookBack: Contacts History 應用。該應用顯示你最近添加的手機聯繫人,如果你忘記打開它,但問 Siri “我上週在會議上遇到了誰?”,它就可以利用該應用提供信息。
我能夠接受 Siri 將幫助小型應用被用户更頻繁地使用這個論點,尤其是對於那些不是人們每天使用的五六款應用的小型開發者。但我心中更大的問題是,像 Google 這樣的玩家是否有興趣讓 Siri 變得更強大。Google 的大部分收入來自廣告展示,如果 Siri 無需你打開 Gmail 就能找到信息,而是簡單地在屏幕頂部呈現,Google 就會損失那部分收入。但話説回來,Google 幾乎在用 AI 概覽做同樣的事情,所以很明顯它已經在為 AdSense 收入不再是主要來源的世界做準備。
我能預見到 Google 全面支持 Siri AI 的主要激勵因素是消費者選擇。如果某個郵件應用完全支持 Siri AI 而 Gmail 不支持,我更有可能使用其他應用。我希望 Siri 繼續提供這些體驗,拉取我的個人上下文併為我執行操作。如果我在某個應用上開始遇到障礙,我可能會開始尋找替代品。Google 自身強勢地位是否足以留住大多數人,則是另一個問題。
這一切都還在進行中。這不僅是測試版操作系統,還是測試版 Siri。而且這只是我們被告知將來會有的完整體驗的一部分。它令人印象深刻,但真正重要的還在後面。開發者需要添加對 Siri AI 的支持才能發揮其潛力。而 Siri AI 需要更頻繁地正確路由和研究你的請求,而不是被絆倒。到目前為止,我對它所能做的感到驚訝。
順便説一句,音樂會很棒。
攝影:David Imel / The Verge