Siri AI 已经改变了我使用 iPhone 的方式
iOS 27 公开测试版发布,Siri AI 作为可选测试功能备受瞩目。本文作者体验后发现,Siri AI 能通过理解自然语言跨应用执行任务,如查询演唱会日程、从邮件添加日历事件。但当前仅限于苹果自家应用,第三方支持需等到正式版。尽管存在一些识别错误和词汇关联问题,Siri AI 已显著改变了作者的使用习惯。
iOS 27 今天发布了首个公开测试版,正式走出开发者领域。自六月初以来,我一直在测试这个新操作系统,寻找其中的怪癖,并检验它能否兑现苹果在主题演讲中承诺的 hype。
今年的 iOS 升级堪称一次 Snow Leopard 式更新。这意味着它新功能不多,而是专注于修复问题并加速整个系统的运行。应用启动、照片搜索和 AirDrop 传输都应该更快。信息应用现在支持内联回复和 RCS 消息的端到端加密。Liquid Glass 变得更加精致,在硬边和文字周围的可读性更好。这些都是很棒的更新,尤其是对于使用老旧 iPhone 的用户。但此次更新中最大、最受期待的变化是:苹果终于、真正地推出了改进后的 Siri AI,以可选测试版的形式。而这一次,我认为苹果可能真的做到了,或者说,至少为成功的 Siri 打下了基础。
上周,我正犹豫是否来得及去城里听一场免费音乐会。演出有四小时,三个乐队,我只想看其中一个。活动页面上找不到乐队演出顺序,这正好是测试 Siri AI 的绝佳机会。于是我从屏幕顶部向下滑动,问道:“这些乐队按什么顺序演出?”Siri 转了几秒钟它的新小轮子,然后正确告诉了我希望的信息:我想看的乐队最后一个演出。
新 Siri AI 的承诺是改变你使用手机的方式。以前,你打开一个应用并告诉它你想做什么(叫车、设定时器、点午餐);现在,你先说出你想做什么,Siri AI 会尝试浏览所有可用的应用和信息来处理其余部分。所以当我问音乐会时,Siri 查看了网页上的内容,然后搜索网络,找到答案并呈现给我。我不需要在浏览器标签页之间跳转,也不需查看乐队的 Instagram 页面;答案就在那里。
在我使用 Siri AI 的一个月里,它以多种方式让我惊喜。在苹果开发者大会期间测试测试版的第一天,我就能够问:“你能把我的 WWDC 简报添加到日历吗?”Siri 查看了我的邮件,解析了数据,并正确地将六个独立事件添加到了我的日历中。不过我得说明,它只能添加到苹果日历,但稍后会解释原因。
这些互动确实在一定程度上改变了我。现在,我几乎总是先尝试使用 Siri,看看它是否能执行我需要操作或回答简单问题。这几乎让我不再打开浏览器,因为从屏幕顶部下滑输入指令更简单、更快、也更愉悦。
屏幕感知功能可能是对我最有帮助的添加。能够询问 Siri 关于屏幕上的内容,节省了我很多点击操作。当它能基于屏幕感知执行操作,比如将事件添加到日历或导航到屏幕上的地址时,效果更佳。
不出所料,Siri 大多能按我的要求执行任务,当它完成较为复杂的任务时,感觉就像魔法。但当它遇到障碍时,我不禁想起为什么还需要一些努力才能达到“它就能正常工作”的境界——那时 Siri 不工作才是例外,而非常态。
[图片:Siri AI 仍有瑕疵。第一张图中,Siri 没有识别出我的请求涉及当前页面,而是添加了一个通用提醒。]
Siri 将你的请求转化为具体操作的能力似乎是苹果仍在解决的主要问题之一。例如,当我看着演唱会页面说“提醒我在这些票开售时购买它们”时,它只是创建了一个名为“在这些票开售时购买它们”的提醒。我必须小心地说“购买此活动的票开售时”才能触发 Siri 真正查看我的屏幕并搜索网络获取票务信息。而且大多数时候,要求 Siri “route”我到某个位置没有反应,但“direct”却可以。随着更多数据的积累,它的词汇相关性可能会改善,但当整个目标是用自然语言与电脑对话而非依赖关键词时,这很令人沮丧。
目前,如果你在 iOS 27 测试版中体验 Siri AI 预览,只有苹果应用能使用 Siri 的新能力。如果你生活在苹果生态系统中,一切都很棒。你的数据可能存在于信息、邮件和照片中,当你想采取行动时,你会添加到提醒和备忘录中。我每天使用其中一些应用,当它们协同工作时,比如从邮件添加事件到日历,确实像是对未来的惊鸿一瞥。但如果我问 Siri “Daniel 说他什么时候有空玩 Dota?”,Siri 毫无头绪,因为我和 Daniel 只在 Telegram 上聊天,而系统无法访问它。
[图片:苹果视频中展示开发者如何与 Siri AI 集成。]
开发者需要为 Siri AI 支持实现的两个主要更新是实体和意图。实体代表应用可以包含的数据类型,如照片、食谱、播放列表或笔记。如果应用向 Siri AI 添加实体,Siri 就能确切知道可以从该应用获取哪种数据类型用于个人上下文。相反,意图告诉 Siri 可以用那些数据做什么,比如播放、保存或删除。应用实体和意图让 Siri 能够控制和从中拉取数据,而 Siri 的语义层处理对你语言的理解。应用的实体和意图允许这些语义控制和从中获取数据。
如果你的数字生活大多在苹果应用之外,那么你需要的应用与 Siri AI 良好配合还需时日。在公开测试版期间肯定无法实现。开发者现在可以按照 iOS 27 SDK 构建实体和意图,但在 SDK 本身结束测试之前,作为用户你是无能为力的;他们无法在 iOS 27 正式版秋季发布之前向应用推送 Siri AI 更新。
苹果非常依赖开发者更新他们的应用以支持新 Siri,但这并非前所未见。几乎每次苹果添加重要新功能时,比如深色模式或 iPad 应用,开发者都需要做些工作才能让它们正常运行。我想区别在于,之前大多数更新直接影响了开发者自己应用内的用户体验。而这次,苹果要求开发者更新他们的应用以改善 Siri 体验。
[图片:iOS 27 中调用 Siri AI。]
与我交谈过的开发者告诉我,虽然他们对这些新能力非常兴奋,但更新应用以支持它们是一项相当庞大的工程。“开发者的概念挑战在于为应用内的每个屏幕和功能创建全面支持,”曾在 Workflow(后被苹果收购成为 Shortcuts)工作的 Matthew Cassinelli 说。“但向基于代理的模型过渡,允许专业应用动态呈现相关数据,这使它们对用户更有用,否则用户可能不常打开那些特定应用。”
一个例子是 LookBack: Contacts History 应用。该应用显示你最近添加的手机联系人,如果你忘记打开它,但问 Siri “我上周在会议上遇到了谁?”,它就可以利用该应用提供信息。
我能够接受 Siri 将帮助小型应用被用户更频繁地使用这个论点,尤其是对于那些不是人们每天使用的五六款应用的小型开发者。但我心中更大的问题是,像 Google 这样的玩家是否有兴趣让 Siri 变得更强大。Google 的大部分收入来自广告展示,如果 Siri 无需你打开 Gmail 就能找到信息,而是简单地在屏幕顶部呈现,Google 就会损失那部分收入。但话说回来,Google 几乎在用 AI 概览做同样的事情,所以很明显它已经在为 AdSense 收入不再是主要来源的世界做准备。
我能预见到 Google 全面支持 Siri AI 的主要激励因素是消费者选择。如果某个邮件应用完全支持 Siri AI 而 Gmail 不支持,我更有可能使用其他应用。我希望 Siri 继续提供这些体验,拉取我的个人上下文并为我执行操作。如果我在某个应用上开始遇到障碍,我可能会开始寻找替代品。Google 自身强势地位是否足以留住大多数人,则是另一个问题。
这一切都还在进行中。这不仅是测试版操作系统,还是测试版 Siri。而且这只是我们被告知将来会有的完整体验的一部分。它令人印象深刻,但真正重要的还在后面。开发者需要添加对 Siri AI 的支持才能发挥其潜力。而 Siri AI 需要更频繁地正确路由和研究你的请求,而不是被绊倒。到目前为止,我对它所能做的感到惊讶。
顺便说一句,音乐会很棒。
摄影:David Imel / The Verge