應用程式快照可讓你將最前方的應用程式視窗傳送到 ChatGPT 對話中。當你正在電腦上的其他應用程式中工作,想讓 ChatGPT 了解目前的上下文以協助完成任務時,就可以使用這項功能。
macOS 和 Windows 的 ChatGPT 桌面版應用程式皆提供應用程式快照功能。在 macOS 上同時按下兩個 Command 鍵,或在 Windows 上同時按下兩個 Alt 鍵,即可擷取快照。你也可以自訂應用程式快照的快速鍵。
應用程式快照會擷取哪些內容
應用程式快照只會擷取最前方的視窗,可能包含:
- 目前可見視窗的影像。
- 該視窗中可取得的文字,包括可見文字,以及應用程式在目前可見的捲動區域之外提供的文字。
將應用程式快照加入對話後,它就會像附件一樣運作。ChatGPT 會將應用程式快照儲存在本機的工作階段檔案中,就像你手動附加的檔案或影像一樣。
何時使用應用程式快照
當 ChatGPT 需要先取得其他應用程式中的上下文才能採取行動時,可以使用應用程式快照。
範例:
- 分享 API 參考文件頁面,請 ChatGPT 撰寫使用該 API 的指令碼。
- 分享電子郵件或行事曆畫面,請 ChatGPT 草擬下一步行動。
- 分享影像編輯器、設計或預覽視窗,請 ChatGPT 修改相關素材或程式碼。
- 分享直接展示比文字描述更清楚的錯誤、設定面板或應用程式狀態。
擷取應用程式快照
- 將你要分享的應用程式視窗移到最前方。
- 在 macOS 上同時按下兩個 Command 鍵,或在 Windows 上同時按下兩個 Alt 鍵,也可以使用你在 ChatGPT 設定中自訂的快速鍵。
- 如果 ChatGPT 要求設定權限,請完成設定。
- 請 ChatGPT 使用應用程式快照執行任務。
根據預設,ChatGPT 會為應用程式快照開啟新對話。如果你在過去 60 秒內曾與某個對話互動,ChatGPT 就會將應用程式快照加入該對話。連續擷取的應用程式快照會加入同一個對話。
你可以在應用程式設定中變更快速鍵和 應用程式快照目的地 。 選擇 目前對話 或 新增對話 來設定目的地,或保留 自動 ,採用此處說明的行為。
透過浮動控制項使用應用程式快照
在 macOS 上,當寵物浮動控制項已開啟, 且 ChatGPT 主視窗位於背景時, 自動 設定會透過這些控制項 開啟新對話,並附上應用程式快照。即使你選擇 Mini 作為寵物,也可以使用此功能。請先在主應用程式中 完成應用程式快照的權限設定。在 Windows 上,應用程式快照會在主應用程式中開啟。
權限與安全
在 macOS 上,ChatGPT 可能會要求取得以下權限,才能擷取應用程式快照:
- 螢幕與系統音訊錄製 可讓 ChatGPT 擷取 最前方視窗的影像。
- 輔助使用 可讓 ChatGPT 讀取最前方視窗中可取得的文字。
擷取應用程式快照會將擷取的影像和可取得的文字分享給 ChatGPT。除非任務需要那些內容,否則請避免擷取含有敏感內容的應用程式快照。
請以分享螢幕截圖和文件給 ChatGPT 時的相同標準,審查應用程式快照。
限制與疑難排解
應用程式快照需要使用 macOS 或 Windows 的 ChatGPT 桌面版應用程式。如果你在 CLI 中繼續一段已包含應用程式快照的對話,該附件會保留在對話記錄中,但 CLI 無法建立新的應用程式快照。
對於某些應用程式和網站,包括 Google Docs、Gmail、Google Sheets 和 Google Slides,ChatGPT 可能只會收到目前可見畫面的螢幕截圖,而未取得完整文件或畫面外的文字。在 ChatGPT Work 或 Codex 中,ChatGPT 可以使用已安裝的對應外掛程式,存取相關應用程式內容並協助處理你的要求。
如果應用程式快照無法運作,請更新桌面 App、檢查設定的快速鍵,並確認你的組織允許使用應用程式快照。在 macOS 上,也請檢查權限:
- 開啟 系統設定 > 隱私權與安全性。
- 檢查 Codex Computer Use 的 螢幕與系統音訊錄製 和 輔助使用 權限。
- 重新啟動應用程式,然後再試一次。
