OpenAI Appshots 讓任何Mac窗口成為Codex的上下文
OpenAI新功能Appshots允許Mac用户通過按下兩個Command鍵，將當前窗口內容（包括不可見區域文本）發送給編程助手Codex，無需複製或描述。該功能需要屏幕錄製和輔助功能權限，適用於所有計劃，且不受EEA等地區限制。
文章情報
工程師中級
要點
- 按下兩個Command鍵即可將活動窗口內容發送至Codex線程，包括滾動區域外的文本。
- 支持直接發送API文檔、郵件、設計草稿或錯誤消息，無需手動複製。
- 需要macOS屏幕錄製和輔助功能權限，適用於所有計劃。
- 與Computer Use互補，但不受EEA、英國和瑞士的區域禁令影響。
為甚麼重要
這條新聞值得關注，因為按下兩個Command鍵即可將活動窗口內容發送至Codex線程，包括滾動區域外的文本。
技術影響
可能影響開發流程、團隊協作、自動化能力和工具鏈選擇。
OpenAI近日為旗下編程助手Codex推出了名為Appshots的新功能，旨在簡化Mac用户向AI提供上下文的過程。用户只需同時按下兩個Command鍵，當前活動窗口的內容就會自動發送至Codex線程。這一過程不僅截取屏幕截圖，還提取窗口中的文本信息，包括用户尚未滾動到的區域。這意味着開發者可以直接將API文檔、電子郵件、設計草案甚至錯誤消息傳遞給Codex，無需手動複製或詳細描述。
值得注意的是，對於Google Docs或Gmail等網頁服務，Appshots有時僅能捕獲可見部分的截圖。該功能需要用户在macOS中授權屏幕錄製和輔助功能權限。Appshots適用於所有付費計劃，並與今年4月發佈的Computer Use功能相輔相成。與Computer Use不同，Appshots不受歐洲經濟區（EEA）、英國和瑞士的地區禁令限制。OpenAI表示，這一功能旨在提升編碼效率，讓AI更快理解用户意圖。