人工智能科技公司 OpenAI 近日正式發佈了桌面版 Codex 應用程序的最新更新。本次升級最引人矚目的變化是,Mac 操作系統版本正式上線了名爲 Appshots 的全新功能,旨在讓 AI 能夠直接讀取並理解用戶的軟件應用窗口。

通過這項新功能,Mac 用戶只需按下鍵盤上的 Command 鍵,即可快速將當前活動的應用程序窗口以截圖的形式發送給 Codex。這一舉措不僅極大地簡化了用戶的操作流程,也標誌着桌面端 AI 的交互體驗邁上了新臺階。

打破屏幕限制讀取隱藏文本

值得注意的是,Appshots 功能在傳輸數據時並不僅僅停留在傳統的視覺截圖層面。系統在捕獲畫面的同時,還能深度讀取窗口內部的文字內容,甚至包括屏幕上因滾動而暫時沒有顯示出來的隱藏部分。

OpenAI 官方表示,該功能主要爲了解決用戶在實際工作場景中的核心痛點。例如,開發者在瀏覽器中調試網頁發現缺陷,或者設計師需要實現複雜的界面設計時,都可以直接利用該功能傳輸複雜界面,從而免去了手動貼圖和複製文字的繁瑣步驟。

核心任務管理功能正式轉正

除了極具創新力的窗口讀取功能外,此前備受關注的任務管理指令也在此次更新中結束了實驗階段,正式面向全量用戶轉正。用戶現在可以在 Codex 應用、集成開發環境(IDE)擴展或命令行界面中設定明確的長週期目標。

一旦目標設定完成,Codex 將會跨越數小時甚至數天持續推進任務,直至達到預設的里程碑。在此期間,用戶不僅可以隨時查看任務的最新進度、調整後續的執行方向,還能根據實際需求直接暫停任務。