管理員主控台中的「洞察」可協助你瞭解團隊如何運用 ChatGPT Work 和 Codex,以及點數用於哪些工作。在工作區概覽中開啟一個類別,即可查看其中的任務與使用情況。比較結果前,請先確認各個檢視顯示的資料範圍。
透過這些檢視找出值得評估的工作流程,並與負責人一同評估。將使用情況和支出與團隊紀錄對照,瞭解工作是否更省力、符合品質標準,或帶來更好的成果。
分析檢視
管理員主控台提供 ChatGPT Work 和 Codex 的分析資料。「使用情況」顯示活動與消耗量。「洞察」依類別和任務整理使用情況。針對工程工作,「程式碼審查」會顯示審查活動及發現的問題。
若要查看 Token,請使用「使用情況」中提供的 Token 指標。訊息占比、點數占比和 Token 占比代表不同的意義;比較或分享結果時,請保留這些標籤,避免混淆。
開啟「洞察」
在管理員主控台中選取你的工作區,然後開啟 分析 > 洞察。你需要具備該工作區分析資料的存取權;可見的檢視與資料取決於你的權限和已啟用的功能。
解讀結果前,請先確認工作區、日期範圍及可用的篩選條件。比較活動時,請維持這些條件一致。「洞察」僅提供開始分類之後的歷史資料。
使用案例與任務
在「概覽」中,使用「使用案例 / 任務」切換控制項,在大類別與更具體的活動之間切換。在「使用案例」分頁中展開類別,即可查看其中的任務。
在圖表中選取使用案例或任務,即可開啟詳細資料。使用「使用案例」表格可比較前 10 名以外的類別與任務。
一個類別可能包含多個工作流程。在將類別視為單一業務流程之前,請先查看其中的任務。若部分活動尚未分類,請在說明結果時註明這項限制。
訊息、點數與活躍使用者
請搭配查看表格中的「訊息」、「點數」與「活躍使用者」,以瞭解各類別或任務。若出現抽樣提示,顯示的數量僅反映抽樣活動。請勿按比例放大這些數量來估算整個工作區的活動總量。
訊息 顯示與類別或任務相關的訊息數量。訊息數量無法反映團隊完成了多少工作。
點數占比 顯示類別或任務消耗的點數所占比例。搭配「點數」與「訊息」查看,可瞭解點數消耗集中在哪些工作。
活躍使用者 顯示在類別或任務中活躍的人數。搭配「訊息」查看,可比較使用該類別的人數與產生的活動量。
若某類別的點數占比偏高,請查看其中的任務、模型與設定。工作較複雜或選用不同模型,都可能是該類別點數用量較高的原因。在判斷這些消耗是否值得之前,請先檢視團隊完成的成果。
若某類別的活躍使用者不多,請詢問他們如何使用,以及遇到哪些困難。他們可能有值得分享的工作流程,也可能需要更多支援。
類別詳細資料
開啟類別詳細資料,即可在右側抽屜面板中查看其中的任務與使用情況明細。
查看類別中的任務與各任務使用的點數。模型、推理與速度明細會顯示各選項在所選類別或任務中的點數占比。若消耗量有所變化,請詢問團隊的工作內容或這些設定是否有變動。
若有提供相關資料,請查看該類別或任務的外掛程式與技能呼叫次數。這些計數涵蓋所選日期與篩選條件範圍內,ChatGPT Work 和 Codex 的活動。呼叫次數不等同於訊息數量或已完成的任務數量。
分享發現時,請繼續將估計值標示為估計值。歸屬於外掛程式與技能的點數可能重疊,因此請勿將這些檢視中的數值相加來計算總投入。如需進一步瞭解如何解讀點數及其對帳單的影響,請參閱 ChatGPT Work 使用情況與成本。
程式碼審查
若要檢視工程工作,請開啟 程式碼審查 ,查看工作區可用的審查指標。
- 已審查的 PR 顯示 Pull Request 審查活動。已審查的 Pull Request 不一定已合併或部署。
- 發現的問題 顯示這些審查所發現的問題。請向審查人員確認哪些發現有幫助,以及哪些已採取行動處理。
- 依優先順序分類的問題、表情回應及回應情緒 提供更多背景資訊,協助瞭解審查發現及人們的反應。
計數為零可能表示沒有活動,也可能是報表資料有缺漏。解讀計數前,請先確認日期範圍,以及相關審查是否已納入。
評估價值
選擇團隊在 ChatGPT Work 或 Codex 中使用的一個工作流程。與業務負責人共同議定要改善的成果,以及衡量方式。將「洞察」與團隊紀錄對照檢視,例如客戶簡報、庫存計畫或 Pull Request。讓實際執行工作的人員參與評估。
使用一致的報告期間,並留意任何抽樣提示。類別可能包含多個工作流程,而活動計數並不能衡量已完成的工作。以下範例說明如何同時運用使用資料與工作流程中的證據來探究價值。
修正錯誤
Codex 是否能協助工程師減少調查與重做的工作,更省力地修正錯誤?
選擇某個服務中反覆出現的一類錯誤,例如輸入處理不正確。與熟悉該程式碼的工程師一起檢視問題、修正內容及迴歸測試。
- 比較類似的修正。 記錄複雜度相近的錯誤所需的調查、實作與審查時間。將實際投入工作的時間與等待審查或發布的時間分開記錄。
- 查看「洞察」。 開啟「軟體工程」,尋找與調查相關的任務。查看比較期間內的點數與活躍使用者。
- 確認結果。 確認測試能重現錯誤,並在套用修正後通過。詢問工程師修正了哪些內容,並記錄重新開啟的問題或迴歸問題。
- 若經確認有效的修正所需的總投入較少,請分享此工作流程。 若仍有大量工作需要重做,請改善重現步驟或程式碼庫上下文,再次比較。
新增測試
Codex 是否能協助團隊減少人工作業,讓測試涵蓋重要的失敗情境?
選擇一個已知測試涵蓋範圍有缺口的模組。在比較結果之前,先就哪些行為和失敗情境需要測試達成共識。
- 定義缺口。 列出尚未涵蓋的行為,並記錄新增類似測試所需的投入。使用測試報告記錄初始測試涵蓋範圍。
- 查看洞察。 在「軟體工程」下尋找相關任務。查看同一期間的點數用量,以及可用的模型和推理明細。
- 檢查測試。 請工程師確認斷言能偵測到預期的失敗情境。記錄不穩定的測試結果、增加的執行時間,以及重寫或維護測試所花的時間。
- 如果完成並納入有效測試所需的投入減少,就沿用這個方法。 如果測試通過卻未能偵測到失敗情境,請釐清預期行為後再試一次。
重構程式碼
Codex 是否能協助團隊完成重構,同時維持預期行為?
選擇一項範圍明確的變更,例如在整個套件中替換對某個已棄用 API 的呼叫。就哪些呼叫位置納入範圍,以及團隊將如何驗證結果達成共識。
- 設定範圍。 記錄需要更新的呼叫位置,以及手動完成類似變更所需的投入。請註明哪些數據是估計值,尤其是這項工作先前曾被延後時。
- 查看洞察。 查看同一期間相關的「軟體工程」任務及其點數用量。如果用量特別突出,請查看可用的模型和推理明細。
- 驗證變更。 審查差異、執行相關檢查,並確認是否有遺漏的呼叫位置或行為變更。將審查、修正和後續修復一併計入投入。
- 如果重構通過事先約定的檢查,就擴展到另一個套件。 如果仍有太多整理工作,請先縮小變更範圍或提供可正常運作的範例。
客戶研究
ChatGPT Work 是否能協助業務人員以較少的投入,準備準確的客戶摘要?
選擇一個定期準備客戶摘要的業務團隊。就每份摘要應包含的內容達成共識,例如客戶歷史紀錄、目前的優先事項,以及要向客戶提出的問題。
- 比較類似的摘要。 記錄試用前和試用期間的準備與審查時間。採用相同的品質標準,並選擇所需研究程度相近的客戶。
- 查看洞察。 在「業務」下尋找客戶研究與規劃。使用可用的群組篩選器,聚焦於該團隊。查看同一期間的點數用量、模型選擇,以及所有可用的外掛程式或技能活動資料。
- 與業務人員一起審查摘要。 對照原始紀錄核實內容,並評估研究是否有助於為客戶對話做準備。將修正工作計入投入,並追蹤節省下來的時間是否用於客戶對話或後續跟進。
- 如果準備準確摘要所需的投入減少,就分享這個方法。 如果缺少重要的背景資訊,請改善來源資料或提供共用技能。使用 CRM 紀錄評估後續合格商機或銷售的變化;單靠洞察無法確認其中的關聯。
庫存規劃
ChatGPT Work 是否能協助團隊以較少的手動作業,準備可靠的庫存計畫?
選擇一個定期重複的規劃週期,例如為活動備貨。就哪些產品和地點納入範圍,以及團隊將使用哪些銷售和庫存紀錄達成共識。
- 記錄目前的流程。 衡量蒐集紀錄、準備計畫和修正計畫所花的時間。記錄類似週期中的缺貨或庫存過剩情況。
- 查看洞察。 尋找符合團隊規劃工作的類別和任務。查看同一期間的點數用量和活躍使用者人數。在將該類別的使用量歸因於這個工作流程之前,先與團隊確認兩者確實相符。
- 將計畫與實際結果對照。 請庫存負責人確認數量、假設,以及是否有資料缺漏。將審查和修正工作計入投入。週期結束後,比較計畫的備貨量、銷售量和剩餘庫存。
- 如果計畫可靠且所需投入減少,就沿用這個工作流程。 如果缺貨或庫存過剩的情況加劇,請重新檢視輸入資料和假設。使用庫存與採購紀錄評估成本是否降低。
記錄評估結果。 註明使用案例、負責人和報告期間。納入基準、結果、點數用量和限制。記錄與團隊議定的變更,以及檢視這些變更的日期。根據團隊紀錄統計已完成的工作,並註明哪些數據是估計值。
若要評估投資報酬率,請比較改善帶來的價值與 AI、設定、訓練及持續支援的成本。也要計入審查和修正工作所花的時間。節省時間不一定代表節省現金支出;請確認團隊如何運用釋出的人力。
提高使用量上限之前,請先檢視目前的上限、用量,以及哪些工作需要更多可用額度。消耗的點數不一定會成為帳單上的額外費用。請參閱ChatGPT Work 使用量與成本。
使用情況分析是了解 ChatGPT Work 和 Codex 投資報酬的其中一項依據,可顯示所選範圍內的使用量和點數消耗。實際執行工作的團隊則能說明有哪些變化、成果是否改善,以及改善帶來多少價值。結合這兩方面的資訊,決定要擴大採用哪些工作流程,以及團隊在哪些方面需要更多支援。