AI News HubLIVE
站内改写2 分钟阅读

Open Minis:我梦想中Siri AI本应成为的iOS智能代理

Open Minis是一款深度集成苹果原生框架的iOS智能代理应用,它通过内置Linux终端和专门的命令行接口,实现了对日历、家庭、健康、照片等系统组件的精准控制。作者展示了它如何调用HomeKit传感器数据、结合照片与健康信息,甚至创建交互式地图,其能力远超当前Siri AI,堪称前沿模型与iOS系统能力结合的典范。

来源Hacker News AI作者: ExMachina73

Open Minis是一款专为iPhone和iPad设计的聊天机器人应用,但它远不止是一个AI对话界面。通过巧妙利用苹果官方为第三方开发者提供的系统框架API,Open Minis实现了对Reminders、Music、Calendar、Maps、HomeKit、HealthKit、Files等苹果原生应用的深度控制,还能调用Vision(OCR)、Apple NLP、剪贴板、语音识别、NFC和蓝牙等底层能力。这一切的基石是一个内嵌的Linux终端环境(基于iSH),它运行着为每个苹果框架定制的命令行接口(CLI),让大型语言模型(LLM)能够像在桌面终端中一样操作iOS系统。

与许多仅提供封闭聊天界面的AI包装器不同,Open Minis最大的特点是开放和可配置。用户可以通过自然语言指令让应用添加新模型、安装Python包(如ffmpeg、yt-dlp)、使用Git和SSH,甚至接入MCP服务器。应用的文件系统以原生文件提供者形式出现在Files应用中,用户还可以挂载任意文件夹,让AI读写文件。此外,Open Minis拥有基于Markdown文件的记忆系统和技能创建能力,能够自我检视和修改工作区,例如询问它有哪些可用CLI,它会自动生成指南。

作者的亲身体验令人印象深刻。他让Open Minis获取家中的温度和湿度数据,模型通过HomeKit权限提示后,解析所有传感器的原始数据并生成整洁的表格报告——而同一时刻Siri AI的反应却含糊不清。另一个测试是让AI结合照片和健康数据:它先回忆之前讨论过的假期日期,然后筛选照片,找到一艘大船的照片,再查询该日期HealthKit中的步行数据,最终给出答案。整个过程基于确定性代码在设备上执行,既快速又无幻觉。

更富创意的是,作者要求Open Minis用MapKit JS将假期照片放在交互式地图上。应用提示用户安全存储MapKit开发者令牌后,收集照片元数据,几分钟内就生成了一个包含照片地图的HTML文件。这种将大模型能力与iOS原生框架无缝结合的能力,正是Siri AI所欠缺的。

当然,Open Minis并非面向普通用户——它需要一定的技术背景来充分释放潜力,而且界面仍有打磨空间(如推理步骤选择器不够直观)。但作为一款独立开发者作品,它已经展示了当AI不再被隔离在聊天框内,而是真正成为操作系统的一部分时,iOS设备能够实现怎样的自动化与智能。